OpenAI、谷歌、微软与 Anthropic 支持统一 AI 抓取退出标准
AI 总结
据报道,OpenAI、谷歌、微软和 Anthropic 宣布将采用一项新标准,使内容发布方能够一次性向多家 AI 企业拒绝 AI 抓取,并统一声明针对模型训练内容的使用偏好。该标准由 Anthropic 技术负责人 Kevin Kelley 向互联网工程任务组(IETF)提出,预计将集成到网站的 robots.txt 文件中。报道未提供该标准的正式名称、技术规范、实施时间表或具体细节,消息来源标注为新浪财经。
深度见解
该标准将为内容发布方提供一种统一机制,使其可以一次性向多家 AI 企业表达针对模型训练内容的使用偏好,而不必为每家公司分别设置规则。
摘自汇总《传苹果逐步淘汰非触控 MacBook Pro;谷歌 AI 被指正切断互联网流量;赛力斯:问界…》
OpenAI、谷歌、微软和 Anthropic 联手推行 AI 数据抓取退出标准
11 月 1 日消息,OpenAI、谷歌、微软以及 Anthropic 近日宣布将采用一项新标准,内容发布方可以借助该标准选择拒绝 AI 抓取自家网站内容。借助这项管控机制,内容发布方可以一次性向多家 AI 企业统一申明自身针对 AI 模型训练的内容使用偏好,而不必为每家企业单独设置规则。
该标准由 Anthropic 技术负责人 Kevin Kelley 向互联网工程任务组(IETF)提出,并将集成在网站的 robots.txt 文件中。
长期以来,robots.txt 文件用于告知网络爬虫哪些网站内容允许抓取、哪些禁止抓取,适用场景包含搜索索引、网页归档以及 AI 模型训练。目前,网站必须向每一家 AI 企业分别单独声明自己的 AI 训练相关内容使用偏好。在此背景下,各类 AI 爬虫持续抓取网站内容、将网页素材输入 AI 模型训练,内容发布方正为此焦头烂额。(来源:新浪财经)