RecodeX 重构消息,Cloudflare发布了一款新工具,允许网站阻止AI训练爬虫抓取内容,同时保持搜索引擎正常收录。该公司披露,混合用途爬虫占其网络上已验证爬虫流量的36.6%。
Cloudflare推出新工具:可阻止AI训练爬虫同时放行搜索引擎
更多报道Readhub ↗
AI 辅助判断中性仅供信息参考,不构成投资建议
原始信息来源Techinasiatechinasia.com
查看原文 ↗RecodeX 重构消息,Cloudflare发布了一款新工具,允许网站阻止AI训练爬虫抓取内容,同时保持搜索引擎正常收录。该公司披露,混合用途爬虫占其网络上已验证爬虫流量的36.6%。