Cloudflare要求谷歌分离AI与搜索爬虫，遭遇阻力

Cloudflare近日推动谷歌将用于AI内容生成（如AI Overview和Answer Box）的网络爬虫与传统搜索索引爬虫分离，以便网站可针对性地封锁AI抓取流量，同时保留搜索引擎收录权利。尽管Cloudflare CEO公开表示与谷歌正“鼓舞人心地”进行沟通，且若谈判无果将寻求立法支持，但谷歌未确认是否参与相关讨论。此举引发业界对学术研究、安全扫描等“良性爬虫”是否也将被阻挡的担忧，同时可能影响项目如互联网档案馆等公益性资源。若Cloudflare强行推动该变革，恐与大型科技公司发生法律冲突。