AI 机器人通过爬虫检索网页内容用于模型训练,这些 AI 机器人可能会产生大量的请求,导致计费请求激增。您可能不希望 AI 机器人触发指纹识别。设备指纹服务维护了一套 AI 机器人过滤列表,您可以通过需要开启或者关闭该项检查服务。
请注意,通过 AI 机器人过滤的请求,不会返回 blackbox,只会返回相关错误提示。
基于的 AI 机器人过滤
User-Agent
是我们免费提供的一种过滤机制,用于过滤常见且行为良好的 AI 机器人。由于检测逻辑不复杂,可能存在漏过情况,我门会定期更新维护机器过滤列表
配置
1.登录客户平台,导航到设备指纹-配置管理-请求过滤-Bots,启用 AI 机器人过滤

User-Agent
AI机器人过滤列表
来源 | 字符串 |
---|---|
OpenAI | ChatGPT-User GPTBot |
Duckduckgo | DuckAssistbot |
GoogleOther | |
Huawei | PetalBot |
LinerBot | LINER Bot |
Factset | Factset_spyderbot |
Amazon | Amazonbot |
Apple | Applebot |
OAISearchBot | OAI-SearchBot |
Qualified | QualifiedBot |
ICC | ICC Crawler |
Anthropic | ClaudeBot |