明牌:OpenAI 發(fā)布帶有“身份標識”的網絡爬蟲工具 GPTBot
2023-08-08 22:43:31 | 來源:亞匯網 |
2023-08-08 22:43:31 | 來源:亞匯網 |
(資料圖)
OpenAI表示,GPTBot使用專有網頁UA表示其爬蟲身份,完整UA字符串為(MozillaKHTML,likeGecko;compatible;GPTBot/1.0;+https:/gptbot),任何網站管理者都可以自由允許或阻止該爬蟲工具進行數據采集?!鴪D源OpenAI▲圖源OpenAIOpenAI聲稱,若網站管理員不希望被爬蟲搜集資料,管理員可以在網站服務器的robots.txt文件中完全禁止GPTBot抓取信息,或自行決定GPTBot抓取網站上的指定信息。OpenAI此前飽受業(yè)界對于“侵犯隱私問題”的指責,當下OpenAI推出這樣一套GPTBot爬蟲工具,可謂是其對于外界批判作出的相應回應,同時也能夠推動行業(yè)建立AI訓練用爬蟲工具相關基準。亞匯網此前報道,廣告聲明:文內含有的對外跳轉鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結果僅供參考,亞匯網所有文章均包含本聲明。