游戏天地 - 探索最新游戏资讯

  • 首页
  • 攻略秘籍
  • 新游速递
  • 游戏评测
  • 行业观察
游戏天地
探索最新游戏资讯、攻略技巧与行业动态
  1. 首页
  2. 行业观察
  3. 正文

百度百科屏蔽谷歌/必应等搜索引擎 防止内容被抓取训练AI

2024年9月7日 53点热度 0人点赞 0条评论

近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎,预计是为了阻止这些搜索引擎和其他爬虫,未经授权抓取百度百科的内容用于训练AI。

百度百科屏蔽谷歌/必应等搜索引擎 防止内容被抓取训练AI

百度百科的robots.txt文件显示,目前仅有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。

谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他一切搜索引擎爬虫均被明确禁止抓取百度百科的内容。

百度百科屏蔽谷歌/必应等搜索引擎 防止内容被抓取训练AI

虽然360搜索没有在封禁列表中单独列出,但百度百科的策略是禁止一切非白名单爬虫抓取,所以360搜索和其他搜索引擎也都是被屏蔽的。

不过百度百科这种做法其实也只是防君子不防小人,肯定还有很多爬虫通过各种方式继续抓取内容然后拿去训练AI。

标签: 抓取 百度 百科
最后更新:2024年9月7日

admin

游戏天地是一个专注于提供最新游戏资讯、深度游戏评测、丰富游戏攻略以及精彩游戏视频的综合性游戏平台。我们致力于为广大游戏爱好者打造一个内容全面、互动性强、体验优质的游戏社区。无论您是寻找热门新游戏的评测,还是需要经典游戏的攻略指导,或是想要与其他玩家分享游戏心得,游戏天地都能满足您的需求。加入我们,一起探索无限精彩的游戏世界!广告合作:ramare359@gmail.com

点赞
< 上一篇
下一篇 >

文章评论

razz evil exclaim smile redface biggrin eek confused idea lol mad twisted rolleyes wink cool arrow neutral cry mrgreen drooling persevering
取消回复
分类
  • 攻略秘籍
  • 游戏评测
  • 行业观察
最新 热点 随机
最新 热点 随机
微星发布AMD首款纯白ITX主板MPG B850I EDGE TI WIFI刀锋 钛 准备好了嘛?高校蛋掀起电竞新风潮! 西南网红大城,被DNF「包围」了 营收利润双增长的背后,这家SLG巨头也面临着新的困境 《东方幻想ECLIPSE》繁中版7.23引爆幻想乡 预登录送9000钻 《神州M》今天正式上线!开服活动一次看 武侠江湖盛大开战
13分钟实机首曝,背靠腾讯的二次元开放世界新游,成了今日游戏圈“热搜”百万奖金点燃电竞盛夏!虎牙DOTA2不朽杯决赛前瞻《沙丘:觉醒》(Dune: Awakening)、《剑星》(Stellar Blade)等多款游戏支持DLSS 4多帧生成米哈游下一款旗舰产品定了!市面上从未有过的写实风格+城市开放世界萨罗斯工作室新作《归环》首支PV发布!两大核心亮点首次公开花与梦的邂逅:光之子友友会武汉站圆满落幕 共绘江城温暖图景
推理探险游戏《哎呀!房东先生》Steam商店页面 明年推出 《乱世王者关羽出装铭文攻略》(最强战神关羽全方位装备及铭文选择攻略) 蚂蚁新村今天正确答案6.20 射击游戏《狙击精英:抵抗》Steam页面开放 明年发售 《灾厄逆刃》真相怎么解锁 扎克伯格“偷瞄”热聊贝索斯未婚妻 华裔妻子表情冷漠
标签聚合
庄园 答案 [db:tag] 玩家 游戏 [db:标签] 攻略 蚂蚁

COPYRIGHT © 2024 測試. ALL RIGHTS RESERVED.

Theme Kratos Made By Seaton Jiang

冀ICP备2023031000号-2