Cloudflare为免费用户推出AI爬虫防护功能 可自动识别和阻止抓取内容的爬虫

Cloudflare为免费用户推出AI爬虫防护功能可自动识别和阻止抓取内容的爬虫新推出的AI爬虫防护(AIScrapersandCrawlers)则是面向所有用户推出的一键设置，无论是免费还是订阅用户，只需要一键开启该选项后即可。CloudFlare称开启此选项后将会阻止机器人和爬虫抓取网站内容用于训练人工智能模型，这可以避免某些人工智能公司未经授权直接抓取网站内容。背后的运作原理暂时还不清楚，不过大概率是CloudFlare已经整理并识别常见的AI爬虫例如OpenAI的GPTBot，只要根据这些爬虫的名称进行拦截即可。CloudFlare为数以百万计的网站提供安全防护和分发服务，因此这项功能也确实有实际意义，毕竟有不少网站尤其是新闻媒体类的网站都是版权保护的。只不过问题在于爬虫识别本身也是防君子不防小人，像OpenAI这样公布自己的爬虫名称并表示会遵守robots.txt协议还好处理，问题是很多公司压根不遵守协议也不公布自己的爬虫名称，疯狂抓爬网站获取内容。这种情况下想要拦截就需要想一些对策了，比如对于高频抓爬的UA直接封禁，开启CloudFlare的真人验证等功能，防止各种爬虫绕过CloudFlare的AI爬虫防护。如何开启此功能：CloudFlare、控制台、转到对应网站、安全性、自动程序，开启AIScrapersandCrawlers即可。...PC版：https://www.cnbeta.com.tw/articles/soft/1436037.htm手机版：https://m.cnbeta.com.tw/view/1436037.htm

Cloudflare 推出了一项对抗人工智能机器人的功能

Cloudflare推出了一项对抗人工智能机器人的功能一些AI供应商，包括谷歌、OpenAI和苹果，允许网站所有者通过修改网站的robots.txt来阻止他们用于数据抓取和模型训练的机器人。但是，并非所有AI抓取工具都尊重这一点。因此，为了解决这个问题，Cloudflare分析了人工智能机器人和爬虫流量，以微调自动机器人检测模型。除其他因素外，这些模型还考虑了人工智能机器人是否会通过模仿使用网络浏览器的人的外表和行为来试图逃避检测。如果想要开启该功能，只需要导航到cf仪表盘的安全性=>自动程序，然后打开AI爬虫程序和爬网程序开关。关注频道@ZaiHuaPd频道爆料@ZaiHuabot

Cloudflare发布页面防护（Page Shield）封测

Cloudflare发布页面防护（PageShield）封测PageShield是一种面向客户端安全的功能服务，客户可以使用它来检测来自访客浏览器中发生的脚本攻击、数据泄露等脚本监控（ScriptMonitor）通过记录网站随时间推移的JavaScript依赖关系。比对发现新的JavaScript依赖项时会触发警报，方便Web应用程序所有者可以及时调查它们是否为预期更改并做出响应*该功能无需用户维护内容安全策略（CSP）列表*目前仅限商业、企业版用户申请测试申请地址：https://www.cloudflare.com/waf/page-shield/——消息来源@CN_Cloudflare

Cloudflare 推出阻止人工智能机器人的工具

Cloudflare推出阻止人工智能机器人的工具云服务提供商Cloudflare推出了一款新的免费工具，以防止机器人抓取其平台上托管的网站数据来训练人工智能模型。要启用，只需导航到Cloudflare仪表板的“安全性”>“自动程序”，打开“AI爬虫程序和爬网程序”选项。该公司表示：“客户不希望人工智能机器人访问他们的网站，尤其是那些不诚实的机器人”为了解决规避检测问题，Cloudflare分析了人工智能机器人和爬虫流量，以微调自动机器人检测模型。除其他因素外，模型还考虑了人工智能机器人是否会通过模仿使用网络浏览器的用户行为来试图逃避检测。——、

微博上线“一键防护”功能 减少用户遭言论攻击

微博上线“一键防护”功能减少用户遭言论攻击为减少和预防用户遭受言论攻击，新浪微博平台于今天（11日）正式上线“一键防护”功能。据微博官方账号“微博管理员”，开启“一键防护”模式后，七天内，该账号将不会接收未关注人的私信，未关注人无法评论微博，未关注人转发微博的记录也不会展示在转发列表中。七天后，“一键防护”模式将自动关闭，且私信和评论的相关设置恢复为原状态。据了解，该功能测试阶段仅针对部分用户开放，后续将面向全站用户开放。发布：2022年3月11日5:15PM

多家AI 公司绕过网络标准抓取出版商网站内容

多家AI公司绕过网络标准抓取出版商网站内容据TollBit公司透露，多家AI公司正在绕过"robots.txt"协议，抓取网页内容用于生成AI系统。AI公司Perplexity被指未经许可使用福布斯Forbes的内容。具TollBit透露，这不是个例，多家AI公司也在这里做。这种行为可能对新闻行业造成经济损失，因为新闻出版者无法从中获利。关注频道@ZaiHuaPd频道爆料@ZaiHuabot