API Reference
English

搜索机器人请求过滤

搜索机器人会产生合法的互联网流量,允许搜索引擎索引您的网站。但您可能不希望搜索机器人触发指纹识别。设备指纹服务维护了一套自己的搜索引擎机器人过滤列表,您可以通过需要开启或者关闭该项检查服务。

请注意,通过搜索机器人过滤的请求,不会返回 blackbox,只会返回相关错误提示。

基于的搜索机器人过滤 User-Agent是我们免费提供的一种过滤机制,用于过滤常见且行为良好的搜索机器人。由于检测逻辑不复杂,可能存在漏过情况,我门会定期更新维护机器过滤列表

配置

1.登录客户平台,导航到设备指纹-配置管理-请求过滤-Bots,启用搜索机器人过滤


User-Agent搜索机器人过滤列表

来源字符串公共文档
Mail.rumail.ru来源
Microsoftbingbot AdIdxBot MicrosoftPreview来源
Appleapplebot来源
Huaweipetalbot来源
Navernaver.me/spd来源
Yahooslurp来源
Baidubaiduspider来源
Sogousogou web spider sogou wap spider sogou pic spider来源
Exaleadexabot来源
Coccoccoccocbot来源
SeznamseznamBot来源
Googlegooglebot AdsBot-Google Storebot-Google APIs-Google AdsBot-Google-Mobile Mediapartners-Google Googlebot-Image Googlebot-News Googlebot-Video AdsBot-Google-Mobile-Apps FeedFetcher-Google Google-Read-Aloud Google-Site-Verification来源
Yandexyandex.com/bots来源
Bytedancebytespider来源
Duckduckgoduckduckbot来源
AhrefsAhrefsBot AhrefsSiteAudit来源
Facebookfacebookexternalhit facebookcatalog来源
PinterestPinterestbot来源
CincrawCincraw来源
Semrushhttp://www.semrush.com/bot.html
SeekportSeekportBot来源
AmazonAmazonbot/0.1来源
DataDogdatadog来源