#robots.txt

robots.txt 로 AI 크롤러와 검색 크롤러를 구분해 허용하거나 막는 방법과 주요 채널의 실제 규칙을 다룬 기사를 모았습니다. 규칙은 바뀔 수 있어 확인일을 붙입니다.

기사 3건