您可能希望对某些页面提供免费访问,而对其他页面收费:
- 允许免费访问首页、分类页或导航,以帮助爬虫发现付费内容。
- 排除像登录、搜索或 API 端点这样不包含收费内容的纯功能性页面。
- 先在您网站的一小部分试用单次爬网付费,然后再进行推广。
- 对促销或存档内容提供免费访问,而对优质文章收费。
要开始使用,请通过 配置规则 (Configuration Rules) 排除特定的 URI 模式使其不被收费:
-
在 Cloudflare 仪表板中前往 Rules(规则)> Overview(概述)。
Go to Overview ↗ -
选择 Create rule(创建规则)> Configuration Rule(配置规则)。
-
When incoming requests match(当传入请求匹配时):设置您的 URI 模式。
- Field(字段):
URI Full - Operator(运算符):
wildcard - Value(值):
https://*example.com/public/*
- Field(字段):
-
选择 Disable Pay Per Crawl(禁用单次爬网付费)> Add(添加)。
-
选择 Deploy(部署)。
模式示例:
- 免费首页:
URI Full等于https://example.com/ - 免费目录:
URI Fullwildcardhttps://*example.com/public/*