Reddit 开始反对人工智能爬虫

Reddit 正在反对人工智能公司 — — 或者至少要求他们付出代价。

本周早些时候，Reddit 宣布将更改其 Robots 排除协议，也称为 robots.txt 文件。这项听起来枯燥无味的修改是人工智能公司与实际拥有这些内容的公司之间更大规模谈判/争斗的一部分，前者渴望获得可用于训练语言模型的内容，后者则拥有这些内容。

“Robots.txt” 是网站与第三方沟通网站如何被抓取的方式——典型的例子是允许 Google 抓取的网站，以便将其包含在搜索结果中。

就人工智能而言，价值交换就没那么明显了。如果你运营的网站的商业模式是吸引点击量和眼球，那么让人工智能公司吸走你的内容，却不给你带来任何流量，这种做法就没什么吸引力了——在某些情况下，他们甚至会直接剽窃你的作品。

因此，通过更改 robots.txt 文件，以及继续限制和阻止未知机器人和爬虫，Reddit 似乎正在努力防止像 Perplexity AI 受到批评。

点击播放以了解更多信息，然后在评论中告诉我们您的想法！