聊天機器人 GPT 的 robots.txt 不允許 Anthropic ChatGPT robots.txt disallows Anthropic

https://chatgpt.com/robots.txt

ChatGPT robots.txt 文件禁止 Anthropic 的訪問。此文件中列出了一些爬蟲代理程序的訪問限制,包括 CCBot、img2dataset、Google-Extended 等。其中 User-agent 為*的項目列出了允許和禁止訪問的路徑。

via Hacker News

July 7, 2024 at 08:11PM

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *