最近，蘋果在推出新的 AI 功能時遇到了一些挑戰。許多大型網站紛紛封鎖了蘋果的 AI 爬蟲，蘋果被迫與這些網站進行許可協議的談判。這種情況與谷歌形成鮮明對比，後者由於其強大的市場影響力，能夠施加壓力，迫使出版商允許其 AI 訪問內容。

開發者 程序員 黑客 代碼 漏洞

根據《WIRED》的一項報道，像 Facebook、Instagram、Craigslist、Tumblr、紐約時報、金融時報、The Atlantic、Vox 媒體、USA Today Network 以及 Condé Nast 等知名網站都在阻止蘋果的 AI 爬蟲 Applebot-Extended 的訪問。這些出版商中，有一些已經與 OpenAI 達成了協議，允許其 AI 使用他們的內容。

爲了應對這一局面，蘋果最近推出了新的爬蟲工具 Applebot-Extended。網站運營者可以通過 robots.txt 文件來阻止這個爬蟲。根據《WIRED》的分析，在1000個被分析的網站中，大約有7% 選擇了阻止這一 AI 爬蟲。而數據記者 Ben Welsh 的另一項分析顯示，在1167個主要是美國的英文出版物中，有294個阻止了 Applebot-Extended 的訪問。

除了蘋果，Anthropic 和 OpenAI 等公司也面臨着類似的挑戰。其中，OpenAI 的爬蟲被阻止的比例甚至更高。

在這個過程中，谷歌似乎佔據了更多的主動權。由於其在搜索引擎市場的主導地位，谷歌能夠向出版商施加壓力，要求他們允許其 AI 訪問內容，否則可能會面臨搜索可見度降低的風險。谷歌通過將其 AI 概述與傳統網頁抓取相結合，來強化這一點。此外，谷歌已經停止了與出版商就內容使用進行許可協議的早期討論。由於谷歌每日的搜索量巨大，這樣的協議成本極有可能會很高，從而進一步壓縮了因 AI 產生的搜索利潤。

相比之下，蘋果雖然也有爬蟲用於其搜索產品，但出版商可以阻止 AI 爬蟲，而不會影響在蘋果搜索結果中的可見度。雖然這種做法顯得更加公平，但畢竟搜索並不是蘋果的核心業務。至於 OpenAI 的 ChatGPT 在蘋果產品中的使用情況，未來的許可協議又將如何運作，仍然有待觀察。

劃重點:

🌐 許多大型網站封鎖蘋果 AI 爬蟲，迫使蘋果與之談判許可協議。  

🤖 蘋果新推出的爬蟲工具 Applebot-Extended，現有7% 網站選擇阻止其訪問。  

📉 谷歌利用其市場主導地位施壓出版商，要求提供 AI 內容使用權。