오픈AI가 GPT봇의 웹 크롤링을 막는 robots.txt 구문을 공개했습니다.
User-agent: GPTBot
Disallow: /
이건데 써놓고 보니 참 별거 없군요. 특정 범위에서 블럭하는 방법도 있습니다.
참고/링크 | https://platform.openai.com/docs/gptbot |
---|
오픈AI가 GPT봇의 웹 크롤링을 막는 robots.txt 구문을 공개했습니다.
User-agent: GPTBot
Disallow: /
이건데 써놓고 보니 참 별거 없군요. 특정 범위에서 블럭하는 방법도 있습니다.