知乎已经完全禁止谷歌和必应搜索抓取内容 看起来真怕内容被训练AI?

知乎已经完全禁止谷歌和必应搜索抓取内容看起来真怕内容被训练AI?知乎robots.txt文件已经在4~5月某个时候修改(具体时间可能是5月22日,与知乎强制登录时间近似),此次修改知乎仅允许百度搜索和搜狗(搜狗是新增的,之前禁止搜狗抓取内容)抓取其内容,不再允许其他搜索引擎内容。知乎在几年前曾与百度达成合作因此在百度搜索中知乎的页面权重非常高可以获得更多点击量,现在只允许百度和搜狗而禁止其他一切搜索引擎,不知道知乎是否已经与百度达成了某些方面的协议。目前的这种状况是用户在知乎发布的任何新内容,都不会被谷歌和必应收录了,也就是知乎所有新内容在谷歌和必应上都无法再查到。对于大型内容网站来说趁着AI热潮卖数据确实是个比较不错的变现方式,但禁止抓取也意味着开放的互联网正在逐渐走向封闭。未来可能会有更多网站禁止搜索引擎或其他爬虫抓取内容甚至也同样强制要求登录,对互联网用户来说这肯定不是一个好消息。频道:@kejiqu群组:@kejiquchat

相关推荐

封面图片

知乎已经完全禁止谷歌和必应搜索抓取内容

知乎已经完全禁止谷歌和必应搜索抓取内容27日消息,据网友反馈,知乎robots.txt文件已经在4~5月某个时候修改(具体时间可能是5月22日,与知乎强制登录时间近似),此次修改知乎仅允许百度搜索和搜狗(搜狗是新增的,之前禁止搜狗抓取内容)抓取其内容,不再允许其他搜索引擎内容。目前的这种状况是用户在知乎发布的任何新内容,都不会被谷歌和必应收录了,也就是知乎所有新内容在谷歌和必应上都无法再查到。无论是强制登录还是禁止搜索引擎抓取内容,这些操作看起来都非常像是知乎为了避免自己的内容被抓取而拿去训练人工智能。——(摘抄部分)

封面图片

知乎已禁止谷歌和必应搜索抓取内容

知乎已禁止谷歌和必应搜索抓取内容近日有网友发现,知乎robots.txt文件已经在4~5月某个时候修改(具体时间可能是5月22日,与知乎强制登录时间近似),修改后仅允许百度搜索和搜狗取其内容。知乎在几年前曾与百度达成合作,在百度搜索中优先显示知乎回答,不知道知乎是否已经与百度达成了新协议。分析人士认为,此举可能是知乎为了避免自己的内容被抓取而被拿去训练AI。关注频道@ZaiHuaPd频道投稿@ZaiHuabot

封面图片

整合 ChatGPT 的必应回答不少答案来自知乎?知乎股价创历史新高

整合ChatGPT的必应回答不少答案来自知乎?知乎股价创历史新高2月8日,知乎港股高开高走,午后一度涨超57%,最高至36.6港元/股,股价已创历史新高,总市值一度突破100亿港元。综合国内媒体报道来看,在某种程度上,这或许跟近日爆火的ChatGPT概念有关系。市场认为知乎或收割ChatGPT概念红利,以微软刚发布的新版搜索引擎必应为例,整合了ChatGPT的人工智能技术,在必应中文网页,回答问题就有不少答案来自知乎。投稿:@ZaiHuabot频道:@TestFlightCN

封面图片

小红书禁止所有搜索引擎抓取其内容 只能通过站内手动

小红书禁止所有搜索引擎抓取其内容只能通过站内手动搜索目前并不清楚小红书为什么禁止搜索引擎抓取内容,从SEO角度来说,允许搜索引擎抓取有助于给小红书带来更多流量,毕竟现在百度都索引了7亿多个网页。而且小红书是去年4月修改的,所以估计也不是因为防止被抓取内容训练AI吧?但小红书目前的内容库拿去训练AI确实很有价值,毕竟巨量文字和图片内容。不过robots.txt文件只是君子协定,属于防君子不妨小人的那种,除了会导致用户无法从搜索引擎直接查询小红书内容外,其实帮助也不大,毕竟其他非搜索引擎的爬虫也会继续抓取内容,小红书肯定也做了反爬措施了。现在国内的网站禁止搜索引擎抓取已经是个很常见的事情,或者专门预留一些层级目录供搜索引擎抓取想要获得一些流量,更有甚者甚至别说搜索引擎了,就连正常的用户访问也会被拦截,必须注册账号登录后才能继续访问,这显然不是一个好事情。附小红书2023年4月2日的robots.txt信息:下面是小红书最新的robots.txt信息:...PC版:https://www.cnbeta.com.tw/articles/soft/1425509.htm手机版:https://m.cnbeta.com.tw/view/1425509.htm

封面图片

取代百度!微软必应成中国第一大桌面搜索引擎

取代百度!微软必应成中国第一大桌面搜索引擎来自StatCounter的数据显示,在中国内地桌面搜索市场,2023年4月,微软的必应搜索的份额创出历史新高,达到37.4%,取代百度成为中国第一大桌面搜索引擎。百度搜索的市场份额降至27.01%,与必应有10个百分点的差距。第三名到第六名的搜索引擎分别是搜狗(16.36%)、Yandex(7.45%)、好搜(6.25%)、谷歌(5.2%)。后文:来自:雷锋频道:@kejiqu群组:@kejiquchat投稿:@kejiqubot

封面图片

微软必应取代百度成中国第一大桌面搜索引擎

微软必应取代百度成中国第一大桌面搜索引擎来自StatCounter的数据显示,在中国内地桌面搜索市场,2023年4月,微软的必应搜索的份额创出历史新高,达到37.4%,取代百度成为中国第一大桌面搜索引擎。百度搜索的市场份额降至27.01%,与必应有10个百分点的差距。第三名到第六名的搜索引擎分别是搜狗(16.36%)、Yandex(7.45%)、好搜(6.25%)、谷歌(5.2%)。——

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人