因 AI 企业从存档抓取数据，Reddit 禁止互联网档案馆索引非首页

Reddit禁止互联网档案馆索引其非首页内容，原因是AI企业从存档中抓取数据，此举旨在保护网站内容的隐私和安全性，防止未经授权的访问和使用，互联网档案馆作为一个重要的数字存档工具，其索引范围也受到了一定的限制，这一决策可能会对网站SEO和在线可见性产生一定影响，但Reddit方面认为此举是必要的，以确保用户数据和隐私得到妥善保护。

IT之家 8 月 13 日消息，参考外媒 The Verge 当地时间 11 日报道，海外大型社区论坛 Reddit 宣布禁止互联网档案馆 (Internet Archive) 对该论坛非首页的绝大多数页面进行索引存档。

Reddit 发言人在向媒体解释这一变化时表示，这是因为一些 AI 企业以违反平台政策的方式通过互联网档案馆的存档页面抓取该企业数据。Reddit 允许企业付费抓取 AI 所需的数据，但经由互联网档案馆间接访问显然绕过了这一规定。

互联网档案馆旗下网页时光机 (Wayback Machine) 总监在声明中表示，该组织与 Reddit 有着长期合作关系，并正继续就此事持续展开讨论。