微闻

知乎限制谷歌和必应内容抓取

知乎已经完全禁止谷歌和必应搜索抓取内容

27日消息,据网友反馈,知乎 robots.txt 文件已经在 4~5 月某个时候修改 (具体时间可能是5月22日,与知乎强制登录时间近似),此次修改知乎仅允许百度搜索和搜狗 (搜狗是新增的,之前禁止搜狗抓取内容) 抓取其内容,不再允许其他搜索引擎内容。目前的这种状况是用户在知乎发布的任何新内容,都不会被谷歌和必应收录了,也就是知乎所有新内容在谷歌和必应上都无法再查到。无论是强制登录还是禁止搜索引擎抓取内容,这些操作看起来都非常像是知乎为了避免自己的内容被抓取而拿去训练人工智能。

—— 蓝点网(摘抄部分)

更多文章

评论

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注