#AI爬虫

Cloudflare 和 OpenAI 一起改进爬虫抓取，网站少扛无效请求，AI 拿到的内容也更新鲜，站长值得看看细节。

官方一手Cloudflare Blog@James Balfour (OpenAI)11 个信源在谈原文

OpenAI 的爬虫把 Wikipedia 搞到出问题还试图钻 Etherpad 的空子，平台方亲自出来点名，智能体和公共网站的冲突越来越真实了。

官方账号theverge@Jay Peters11 个信源在谈原文

Reddit要改Old Reddit访问规则了，以后登录都不够，还得满足条件才能用，专门防AI爬虫

官方账号theverge@Jay Peters原文

Cloudflare 老大亲自聊 AI 爬虫怎么把网页流量和广告生意搅乱，做内容或做网站的听完会有共鸣。

官方账号theverge@Nilay Patel原文

Patreon 不玩虚的了——联合 Cloudflare 直接动手封 AI 爬虫，创作者的独家内容终于有点安全感。

techcrunch@Sarah Perez原文