Cloudflare 将推出一种全新的按抓取付费的技术解决方案，作为一种实验方法，来帮助内容创作者获得对 AI 经济贡献的补偿。按抓取付费让创作者能够控制访问并获得报酬，确保 AI 公司能够在获得许可和报酬的情况下，以正确的方式使用优质内容。随着时间的推移，我们预计这将继续演进，并可为发布者和创作者提供不同的工具组合。
发布者将如何使用按抓取付费？
使用按抓取付费，发布者可阻止 AI 爬网程序，允许特定爬网程序，按访问收费或授予免费访问。他们可完全控制其内容的使用方式。
AI 公司将如何使用按抓取付费来访问内容？
AI 爬网程序所有者将能够使用按抓取付费来注册、查看定价，并选择付费或离开，从而以简单透明的方式访问优质内容。
如何识别 AI 机器人，并将其与搜索引擎爬网程序或其他合法的机器人区分开来？
Cloudflare 为全球最大型的网络之一提供技术支持，帮助管理和保护 20% 的 Web 流量。Cloudflare 每天处理数万亿次请求，因此，拥有全球最先进的机器人管理解决方案，可准确区分人类用户和 AI 爬网程序。Cloudflare 通过其复杂的机器人检测系统，结合机器学习、行为分析和指纹识别来识别和区分 AI 爬网程序。这些工具能够准确地对流量进行分类，并将 AI 爬网程序与搜索引擎机器人，以及其他“善意”机器人区分开来。Cloudflare 还运营世界上最大的验证机器人计划，该计划能够高精度检测 AI 爬虫，并允许机器人操作者自行声明其爬虫的目的或意图。
What is the difference between AI Audit vs pay per crawl?
AI Audit lets users view and control crawler behavior on their sites. It is available now on all plans. Pay per crawl is a private beta feature of AI Audit that allows publishers to charge for crawler access
