谁在抓取你的网站?
超过50%的网站流量来自机器人。大多数是隐形的。一行代码,让你看到它们是谁,以及它们的行为是否合规。
60秒内查看你的机器人流量
1
注册你的域名
一个API调用即可获得站点ID。
2
粘贴一行代码
在 </body> 之前添加脚本标签。
3
查看访问者
实时仪表板:按名称、运营商、类别和行为评分显示机器人。
<script src="https://botconduct.org/tracker.js" data-site="YOUR_SITE_ID"></script>
问题所在
对于网站所有者
机器人消耗你的带宽,抓取你的内容,扭曲你的分析数据,探测漏洞。你无法区分好的机器人和坏的机器人,因为没有机器人行为标准。
对于机器人运营者
你精心构建的、遵守规则的机器人与恶意爬虫一起被封锁。没有办法证明你遵循最佳实践。没有凭证,没有信任信号。
10项可衡量的标准
01
识别 IDENTIFY
描述性的User-Agent,包含名称、运营商和文档URL
02
声明 DECLARE
机器可读的数据收集范围和用途声明
03
遵守 OBEY
遵守robots.txt和HTML meta指令
04
限速 THROTTLE
保持在合理的请求速率限制内
05
分散 DISTRIBUTE
分散请求时间,避免突发模式
06
保护 PROTECT
未经授权不得收集个人身份信息
08
响应 RESPOND
功能性联系端点,72小时响应承诺
阅读完整标准
面向机器人运营者
1
测试你的机器人
指向我们的测试环境。20+页面,15个行为陷阱。全自动化。
2
获取评分
10项标准的0-100评分。每个机器人都能获得带有真实分数的证书。
3
年度续期
证书有效期90天。使用令牌续期,无需完整重测。
测试你的机器人
与Cloudflare Web Bot Auth互补
Cloudflare Web Bot Auth 解决身份问题:机器人是谁的加密证明。OBCS解决行为问题:机器人如何行为的可衡量证明。两者共同构成代理网络的完整信任栈。
护照证明你的身份。背景调查证明你的行为。网络两者都需要。
定价
网站所有者
免费
- 机器人跟踪脚本
- 实时仪表板
- 机器人识别
- 每月最多10K次访问
机器人运营者
免费 测试期间
- 完整行为测试(20+页面)
- 90天期证书
- 续期令牌
- 公共注册表上市
保持关注
在我们推出新功能、开放早期采用者名额时获得通知。