DataForSeo bot - 爬虫识别

所属公司

官方文档

爬虫状态

活动

通过 API 可以构建自己的 SEO 工具，同时可以通过 API 提供全面的 SEO 和数字营销数据解决方案。

提供了：SERP API、Google Ads API、Google Trends API、Traffic Analytics API、On-Page API、DataForSEO Labs API、Amazon API、Google Shopping API、Business Data API API 接口。

DataForSeo bot 的 User-agent 是：Mozilla/5.0 (compatible; DataForSeoBot/1.0; +https://dataforseo.com/dataforseo-bot)

User-Agent

Mozilla/5.0 (compatible; DataForSeoBot/1.0; +https://dataforseo.com/dataforseo-bot)

爬虫类别

营销

首次出现时间

2021-10-18 06:02:17

最后一次出现时间

2024-04-07 08:05:33

是否遵守 robots.txt 协议

遵守

说明：

DataForSEO Bot 不断地抓取网络以向我们的反向链接数据库添加新链接并检查已包含的链接。这对于支持我们的使命至关重要——为网站所有者、网站管理员和 SEO 提供平等访问重要数据的机会。

IP 地址总数

173

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	136.243.228.195	crawling-gateway-136-243-228-195.dataforseo.com	DE
2	136.243.220.213	crawling-gateway-136-243-220-213.dataforseo.com	DE
3	136.243.220.214	crawling-gateway-136-243-220-214.dataforseo.com	DE
4	136.243.220.212	crawling-gateway-136-243-220-212.dataforseo.com	DE
5	136.243.228.180	crawling-gateway-136-243-228-180.dataforseo.com	DE
6	136.243.220.211	crawling-gateway-136-243-220-211.dataforseo.com	DE
7	136.243.228.196	crawling-gateway-136-243-228-196.dataforseo.com	DE
8	136.243.220.210	crawling-gateway-136-243-220-210.dataforseo.com	DE
9	136.243.228.197	crawling-gateway-136-243-228-197.dataforseo.com	DE
10	136.243.228.181	crawling-gateway-136-243-228-181.dataforseo.com	DE