"robots.txt" 검색 결과

"robots.txt" 검색 결과 1건

아마존·옐프·델타·JP모건이 AI 에이전트를 막기 시작했습니다. 한국 사이트 47곳의 robots.txt를 직접 받아 읽어 보니 19곳이 AI 봇을 따로 막았고 14곳은 막지 않았습니다. 학습·검색·대신 봇별로 나눈 결과와 실제 원문을 정리했습니다.

2026.10.19 45