快科技8月22日消息，据报道，近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎，预计是为了阻止这些搜索引擎和其他爬虫，未经授权抓取百度百科的内容用于训练AI。
百度百科的robots.txt文件显示，目前仅有百度搜索、搜狗搜索、中国搜索（Chinaso）、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。
谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他一切搜索引擎爬虫均被明确禁止抓取百度百科的内容。
虽然360搜索没有在封禁列表中单独列出，但百度百科的策略是禁止一切非白名单爬虫抓取，所以360搜索和其他搜索引擎也都是被屏蔽的。
不过百度百科这种做法其实也只是防君子不防小人，肯定还有很多爬虫通过各种方式继续抓取内容然后拿去训练AI。
版权声明： "防止内容被抓取训练AI：百度百科屏蔽谷歌/必应等搜索引擎(防止网站内容被采集)"来源于会员自助提稿或网络转载，并不代表优站目录网站大全的观点，如有疑问，敬请联系我们，我们将在第一时间予以审查或更改。
原文链接： https://www.66dir.com/artinfo/2947.html （ 转载请注明来源 ）
聚站网聚站网，免费提供网站目录分类检索，收集正规的中文网站，用户自主的网站提交，为各行业分类目录收藏，聚站网努力打造优质丰富的网站收录平台。
www.565865.com
YY分类目录YY分类目录全人工编辑的开放式网站分类目录，收录国内外、各行业优秀网站，旨在为用户提供网站分类目录检索、优秀网站参考、网站推广服务。
www.yydir.com
66网站目录66网站目录是免费收录各行业优秀网站,提供网站分类目录检索,关键字搜索,提交网站即可免费推广,增加外链,提升网站流量。
www.66dir.com
25分类目录25分类目录专业提供网站网址免费提交收录,25分类目录是采用开放导航式的网站大全,收录国内外各行业优秀的网站网址,让网站在各大搜索引擎收录快排名靠前。
www.25dir.com
和讯科技和讯科技是和讯网核心资讯频道,以报道科技中国,分享全球智慧为目标,为高端财经网络用户提供有关TMT产业领域及时、快速、全面的资讯报道。
tech.hexun.com
百度搜索百度，全球最大的中文搜索引擎、最大的中文网站。
www.baidu.com