👉 OpenAI、Webデータ収集クローラー「GPTBot」のブロック方法を説明 - ITmedia NEWS
公式サイトでは、目次からのリンクなしのページだが、もう一つあるので書いてみた。
リリース当時はここらの話は、Common Clowl 中心だった。
そこらは、最終にあるHNディスカッションリンクを参照でどうぞ。
🌍 GPTBot
ユーザーエージェントトークン:
GPTBot
ユーザーエージェント文字列:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)
IPアドレス:
40.83.2.64/28
🌍 ChatGPT-User
ユーザーエージェントトークン:
ChatGPT-User
ユーザーエージェント文字列:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; ChatGPT-User/1.0; +https://openai.com/bot
IPアドレス:
23.98.142.176/28
🌍 CCBot
以前、使っていましたよね?
ユーザーエージェントトークン:
CCBot
🌍 まとめ
# robots.txt
User-agent: GPTBot
Disallow: /
User-agent: ChatGPT-User
Disallow: /
User-agent: CCBot
Disallow: /
実質、手遅れの気休めなんだろな。