登陆注册

必应等搜索引擎

  • 防止内容被抓取训练AI:百度百科屏蔽谷歌/必应等搜索引擎

    快科技8月22日消息,据报道,近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎,预计是为了阻止这些搜索引擎和其他爬虫,未经授权抓取百度百科的内容用于训练AI。百度百科的robots.txt文件显示,目前仅有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。
    站长网2024-08-22 11:09:43
    0000