祝福網

首頁 > 遊戲 > 遊戲新聞 > 單機資訊 / 正文

百度百科全書屏蔽穀歌必應等大多數搜索引擎

2024-08-22 單機資訊

快速技術今天(8月22日),據報道,百度百科全書最近開始屏蔽穀歌和必應等大多數搜索引擎,預計將防止這些搜索引擎和其他爬蟲未經授權獲取百度百科全書的內容來訓練人工智能。

防止內容被抓取訓練AI 百度百科屏蔽穀歌/必應等搜索引擎

百度百科的robots.Txt文件顯示,目前衹有百度搜索、搜狗搜索、中國搜索(Chinaso)、YYSpider和適搜索(EasouSpider)允許少數搜索引擎抓取其內容。

穀歌搜索、必應搜索、微軟MSN、UC瀏覽器的Yisouspider等所有搜索引擎爬蟲都被明確禁止抓取百度百科的內容。

雖然360搜索沒有在禁令列表中單獨列出,但百度百科的策略是禁止所有非白名單爬蟲,因此360搜索和其他搜索引擎也被屏蔽。

然而,百度百科實際上衹是爲了防止紳士和惡棍。一定有很多爬蟲繼續以各種方式捕捉內容,然後用它們來訓練人工智能。


來源:3dm 精品小說推薦: 昔日落魄少年被逐出家族,福禍相依得神秘老者相助,從此人生路上一片青雲! 我行我瀟灑,彰顯我性格! 彆罵小爺拽,媳婦多了用車載! 妹紙一聲好歐巴,轉手就是摸摸大! “不要嘛!” 完整內容請點擊辣手仙醫

網站分類
標簽列表