克日baidu百科开始屏障google以及必应等大少数搜查引擎，百e必被抓估量是科屏为了克制这些搜查引擎以及其余爬虫，未经授权抓取baidu百科的应等引擎内容用于磨炼ai。
baidu百科的搜查robots.txt文件展现，当初仅有baidu搜查、防止搜狗搜查、内容中国搜查(chinaso)、取磨yyspider以及宜搜搜查(easouspider)等少数多少个搜查引擎被应承抓取其内容。百e必被抓
google搜查、科屏必应搜查、应等引擎微软msn、搜查uc浏览器的防止yisouspider以及其余所有搜查引擎爬虫均被清晰防止抓取baidu百科的内容。
尽管360搜查不在封禁列表中径自列出，内容但baidu百科的取磨策略是防止所有非白名单爬虫抓取，以是百e必被抓360搜查以及其余搜查引擎也都是被屏障的。
不外baidu百科这种做法着实也只是防小人不防小人，确定尚有良多爬虫经由种种方式不断抓取内容而后拿去磨炼ai。