【为防止内容被抓取训练AI,#百度百科屏蔽谷歌等搜索引擎# 】据快科
科技
科技 > 短内容 > 正文

【为防止内容被抓取训练AI,#百度百科屏蔽谷歌等搜索引擎# 】据快科技消息,近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎,预计是为了阻止这些搜索引擎和其他爬虫,未经授权抓取百度百科的内容用于训练AI。 百度百科的robots.txt文件显示,目前仅有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。 谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他一切搜索引擎爬虫均被明确禁止抓取百度百科的内容。

自动播放

【为防止内容被抓取训练AI,#百度百科屏蔽谷歌等搜索引擎# 】据快科

亲爱的凤凰网用户:

您当前使用的浏览器版本过低,导致网站不能正常访问,建议升级浏览器

第三方浏览器推荐:

谷歌(Chrome)浏览器 下载

360安全浏览器 下载