點名微軟!Reddit執行長籲「利用爬蟲機器人挖資料的業者」:應該付費

Reddit執行長Steve Huffman近期接受The Verge網站訪談時,呼籲微軟、Anthropic或Perplexity.ai在內利用爬蟲機器人挖掘各網站資料的業者,應該爲其行爲支付費用。

在與Google、OpenAI達成協議,藉由支付相關費用進行內容授權合作後,Steve Huffman表示在人工智慧技術發展盛行情況下,必須透過特定方式限制任意以爬蟲機器人挖取其網站資料行爲,更指稱包含微軟、Anthropic或Perplexity.ai在內業者並未計劃進行協商。

Steve Huffman指出,微軟一直使用Reddit網站內容訓練其人工智慧模型,並且任意在其Bing Search搜尋結果展示相關摘要內容,甚至被爬蟲機器人取用資料更藉由Bing API資源轉給其他第三方搜尋引擎使用。

因此在現行作法中,Reddit已經針對任意使用爬蟲機器人抓取其網站資料的行爲進行限制,因此使用者透過微軟Bing Search或其他使用Bing API爲基礎打早的搜尋引擎服務,都將無法找到Reddit網站內容,而目前達成合作協議的Google搜尋引擎則可順利找到。

不過,Anthropic方面則迴應表示其自5月中旬之後就已經未再以爬蟲機器人抓取Reddit網站內容,而Perplexity.ai則宣佈將在今年9月推出與內容業者共享廣告收益的合作模式,藉此達成互益目的。

《原文刊登於合作媒體mashdigi,聯合新聞網獲授權轉載。》