Reddit 正在採取行動阻止 AI 公司爬取其內容，或者至少要求它們付費。

本週早些時候，Reddit 宣佈正在更改其機器人排除協議，也稱爲其 robots.txt 文件。這個看似枯燥的編輯是 AI 公司渴望用於訓練其語言模型的內容所有者之間的一場更大的談判 / 戰鬥的一部分。

AI助教 機器人

圖源備註：圖片由AI生成，圖片授權服務商Midjourney

“Robots.txt” 是網站向第三方通信網站如何被爬取的方式，經典的例子是允許 Google 爬取它們以便包含在搜索結果中的網站。

就人工智能而言，價值交換就沒那麼明顯了。當您運行的網站的商業模式涉及吸引點擊和眼球時，讓 AI 公司吸取您的內容並且不發送任何流量（在某些情況下，他們會直接剽竊您的工作）並不具有吸引力。

因此，通過更改其 robots.txt 文件，並繼續對未知機器人和爬蟲進行評級限制和阻止，Reddit 似乎正在努力防止像 Perplexity AI 這樣的公司被批評的做法。

劃重點:

- 📢 Reddit 正在採取行動阻止 AI 公司爬取其內容，或者至少要求它們付費。

- 🤖 Robots.txt 是網站向第三方通信網站如何被爬取的方式，經典的例子是允許 Google 爬取它們以便包含在搜索結果中的網站。

- 💻 Reddit 更改其 robots.txt 文件，並繼續對未知機器人和爬蟲進行評級限制和阻止，以防止像 Perplexity AI 這樣的公司被批評的做法。