跳转到内容
搜索文档

高级配置

最后更新 查看 MarkdownAgent 设置

按 URI 模式禁用单次爬网付费

您可能希望对某些页面提供免费访问,而对其他页面收费:

  • 允许免费访问首页、分类页或导航,以帮助爬虫发现付费内容。
  • 排除像登录、搜索或 API 端点这样不包含收费内容的纯功能性页面。
  • 先在您网站的一小部分试用单次爬网付费,然后再进行推广。
  • 促销或存档内容提供免费访问,而对优质文章收费。

要开始使用,请通过 配置规则 (Configuration Rules) 排除特定的 URI 模式使其不被收费:

  1. 在 Cloudflare 仪表板中前往 Rules(规则)> Overview(概述)

    Go to Overview ↗
  2. 选择 Create rule(创建规则)> Configuration Rule(配置规则)

  3. When incoming requests match(当传入请求匹配时):设置您的 URI 模式。

    • Field(字段)URI Full
    • Operator(运算符)wildcard
    • Value(值)https://*example.com/public/*
  4. 选择 Disable Pay Per Crawl(禁用单次爬网付费)> Add(添加)

  5. 选择 Deploy(部署)

模式示例:

  • 免费首页:URI Full 等于 https://example.com/
  • 免费目录:URI Full wildcard https://*example.com/public/*

附加资源

这篇文档对您有帮助吗?