Fake bot 详细信息

爬虫状态

活动

通过互联网公开数据，收集和整理了各个搜索引擎的伪造爬虫，这类爬虫的主要目的是通过伪造正常搜索引擎爬虫，恶意抓取网站内容。

通过更改爬虫的 User-agent ，可以欺骗反爬虫措施，所以仅仅通过 User-agent 判断是否为搜索引擎爬虫使不正确的，还需要结合爬虫的 IP 地址来判断。

User-Agent

Googlebot/2.1 (+http://www.googlebot.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

95

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	222.186.26.2		CN
2	213.133.108.196	213-133-108-196.clients.your-server.de	DE
3	212.24.92.106		GB
4	209.59.213.222	jburns.yourwebhosting.com	US
5	201.16.162.45	201-016-162-045.static.ctbctelecom.com.br	BR
6	198.246.186.210		US
7	196.15.23.5	idc-blr-proxy-mwg02-o.oracle.com	IN
8	195.114.138.128	128-138-dynamic.retail.datagroup.ua	UA
9	194.177.23.206	194-177-23-206.flops.ru	RU
10	192.187.117.138		US

注：最多只显示10个 IP 地址

User-Agent

Googlebot/2.1 (http://www.google.com/bot.html; googlebot(at)googlebot.com)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	64.6.108.239	ponto.amerinoc.com	US
2	64.6.104.18	slush.phatservers.com	US

User-Agent

Googlebot (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

4

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	93.186.115.95	static.cloud.com.tr	TR
2	93.174.2.17	93-174-2-17.redes.interdominios.com	ES
3	37.9.231.241		IT
4	2.112.14.58	host58-14-static.112-2-b.business.telecomitalia.it	IT

User-Agent

Googlebot/Nutch-1.7

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

9

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	151.80.41.180	ns397928.ip-151-80-41.eu	FR
2	91.121.143.113	ns356755.ip-91-121-143.eu	FR
3	91.121.142.227	ns356734.ip-91-121-142.eu	FR
4	91.121.136.34	ns371970.ip-91-121-136.eu	FR
5	91.121.101.96	ns354110.ip-91-121-101.eu	FR
6	91.121.78.198	ns352062.ip-91-121-78.eu	FR
7	91.121.30.197	ns300347.ip-91-121-30.eu	FR
8	62.210.113.216	62-210-113-216.rev.poneytelecom.eu	FR
9	62.210.113.73	62-210-113-73.rev.poneytelecom.eu	FR

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1 +http://www.googlebot.com/bot.html)

爬虫类别

抓取工具

首次出现时间

2021-10-14 02:50:13

最后一次出现时间

2021-10-14 02:50:13

是否遵守 robots.txt 协议

遵守

IP 地址总数

16

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	193.27.12.10		US
2	207.180.255.81	m11681.contaboserver.net	DE
3	194.99.105.78		PL
4	180.87.230.60	180-87-230-60.ikfpowernet.ikftel.com	IN
5	144.202.31.22	144.202.31.22.vultr.com	US
6	109.207.202.208		UA
7	104.197.247.42		US
8	103.47.135.41	host-103-47-135-41.myrepublic.co.id	ID
9	87.138.73.2	remote.faio.de	DE
10	81.169.250.152	h2401613.stratoserver.net	DE

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (compatible; MSIE 11.0; Windows NT 6.2; Trident/6.0; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	104.167.104.205	tor.exit.chloe.cloudacost.com	US

User-Agent

Mozilla/5.0 (compatible;bingbot/2.0;+http://www.bing.com/bingbot.htm)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

4

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	206.47.106.151	ns1.dexor.com	CA
2	190.156.247.34	static-ip-cr19015624734.cable.net.co	CO
3	178.33.149.1	krzemek.pl	FR
4	85.9.208.120		DE

User-Agent

Googlebot/2.1 (+http://www.googlebawt.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

69

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	220.137.4.157	220-137-4-157.dynamic-ip.hinet.net	TW
2	219.93.43.34		MY
3	202.80.215.175		ID
4	202.46.121.106	202-46-121-106.cnx.com.my	MY
5	201.184.43.136	adsl201-184-43-136.une.net.co	CO
6	201.70.120.158		BR
7	201.7.16.52	201-7-16-52.spopa302.dial.brasiltelecom.net.br	BR
8	197.196.79.26		EG
9	190.226.179.208	host208.190-226-179.telecom.net.ar	AR
10	190.131.219.227		CO

注：最多只显示10个 IP 地址

User-Agent

Googlebot

爬虫类别

抓取工具

首次出现时间

2022-05-18 01:10:47

最后一次出现时间

2022-06-11 14:05:04

是否遵守 robots.txt 协议

遵守

IP 地址总数

22

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	101.43.47.44		CN
2	195.201.251.88	hz-api-01.quttera.com	DE
3	185.37.118.239	ip-239-118.sn3.activenetwork.it	IT
4	156.146.46.134	unn-156-146-46-134.cdn77.com	US
5	142.179.244.222	d142-179-244-222.abhsia.telus.net	CA
6	101.136.106.61	101-136-106-61.mobile.dynamic.aptg.com.tw	TW
7	98.225.185.23	c-98-225-185-23.hsd1.pa.comcast.net	US
8	92.232.235.62	cpc151585-shef16-2-0-cust829.17-1.cable.virginm.net	GB
9	89.78.42.148	89-78-42-148.dynamic.chello.pl	PL
10	89.46.102.12	no-rdns.free.clues.ro	NL

注：最多只显示10个 IP 地址

User-Agent

Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

4

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	162.216.19.183	sitecheck3.sucuri.net	US
2	104.237.143.242	monitor19.sucuri.net	US
3	88.226.89.178	88.226.89.178.static.ttnet.com.tr	TR
4	42.0.7.29		BD

User-Agent

Mozilla/5.0+(compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html)

爬虫类别

抓取工具

首次出现时间

2022-04-24 01:31:38

最后一次出现时间

2022-06-11 02:11:05

是否遵守 robots.txt 协议

遵守

IP 地址总数

19

爬虫 IP 地址列表

#	IP 地址	国家代码
1	120.231.228.235	CN
2	113.91.61.113	CN
3	113.91.54.141	CN
4	219.134.150.105	CN
5	202.144.192.168	CN
6	183.12.220.99	CN
7	113.118.119.243	CN
8	113.118.117.221	CN
9	113.118.117.193	CN
10	113.118.117.131	CN

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html

爬虫类别

抓取工具

首次出现时间

2021-10-22 13:47:45

最后一次出现时间

2022-03-29 02:56:56

是否遵守 robots.txt 协议

遵守

IP 地址总数

227

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	20.128.120.27		US
2	97.96.199.52		US
3	212.247.1.49	static-212-247-1-49.cust.tele2.se	SE
4	49.75.211.101		CN
5	188.85.134.21	static-21-134-85-188.ipcom.comunitel.net	ES
6	197.125.70.61	host-197.125.70.61.etisalat.com.eg	EG
7	139.28.235.104		US
8	183.34.224.148		CN
9	113.104.115.2		CN
10	132.165.57.195		FR

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (compatible; YaDirectFetcher/1.0; Dyatel; +http://yandex.com/bots)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	142.93.16.216		US

User-Agent

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

47

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	223.111.145.141	promote.cache-dns.local	CN
2	222.186.136.90		CN
3	220.128.133.229	220-128-133-229.hinet-ip.hinet.net	TW
4	220.128.122.201	220-128-122-201.hinet-ip.hinet.net	TW
5	214.250.13.182		US
6	202.59.250.82	202-59-250-82.static-ip.as55789.net	TW
7	185.232.22.165	no-mans-land.m247.com	US
8	182.118.97.149	hn.kd.ny.adsl	CN
9	173.82.227.251	ip.ospho.cn	US
10	173.82.227.241	cloud.alecsei.net.br	US

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html\xA3\xA9

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	101.21.77.80		CN

User-Agent

Mozilla/5.0 (compatible; Facebot 1.0; https://developers.facebook.com/docs/sharing/webmasters/crawler)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	61.69.86.126	61-69-86-126.syd.static-ipl.aapt.com.au	AU

User-Agent

Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_1) AppleWebKit/601.2.4 (KHTML, like Gecko) Version/9.0.1 Safari/601.2.4 facebookexternalhit/1.1 Facebot Twitterbot/1.0

爬虫类别

抓取工具

首次出现时间

2021-08-17 07:57:54

最后一次出现时间

2021-12-19 05:22:10

是否遵守 robots.txt 协议

遵守

IP 地址总数

512

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	59.136.41.23	KD059136041023.ppp-bb.dion.ne.jp	JP
2	86.83.138.134	86-83-138-134.fixed.kpn.net	NL
3	78.107.206.118	78-107-206-118.broadband.corbina.ru	RU
4	144.12.108.4		CN
5	115.171.170.66		CN
6	113.128.47.138		CN
7	5.41.231.139		SA
8	42.239.25.209	hn.kd.ny.adsl	CN
9	211.138.116.87		CN
10	36.28.143.209		CN

注：最多只显示10个 IP 地址

User-Agent

acebookexternalhit/1.0 (+http://www.facebook.com/externalhit_uatext.php)

爬虫类别

抓取工具

首次出现时间

2021-08-17 07:42:14

最后一次出现时间

2022-02-22 01:33:12

是否遵守 robots.txt 协议

遵守

IP 地址总数

117

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	41.198.133.38		MU
2	197.185.104.226		ZA
3	192.145.119.65		US
4	75.24.127.46	75-24-127-46.lightspeed.rcsntx.sbcglobal.net	US
5	41.90.38.63		KE
6	220.87.19.121		KR
7	212.100.92.169		NG
8	209.97.169.203		SG
9	209.65.7.210		US
10	204.44.64.108		US

注：最多只显示10个 IP 地址

User-Agent

compatible; Googlebot/2.1; +http://www.google.com/bot.html

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

3

爬虫 IP 地址列表

#	IP 地址	国家代码
1	194.73.47.198	GB
2	36.69.235.172	ID
3	5.119.245.206	IR

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html )

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	38.132.118.247		US
2	23.226.133.27	23.226.133.27.static.quadranet.com	US

User-Agent

//www.bing.com/bingbot.htm)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	81.11.214.192	ip-81-11-214-192.dsl.scarlet.be	BE

User-Agent

bingbot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	93.138.226.77	93-138-226-77.adsl.net.t-com.hr	HR

User-Agent

http://www.bannedsextapes.com/main.html/Googlebot/2.1+

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	47.247.229.83		IN

User-Agent

Mozilla/6.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	62.85.80.140		LV
2	46.109.58.211		LV

User-Agent

Googlebot/2.1; +http://www.google.com/bot.html

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	104.206.12.251		CA
2	86.31.173.107	cpc89244-aztw30-2-0-cust3434.18-1.cable.virginm.net	GB

User-Agent

(compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	103.114.20.200		BD
2	45.74.75.8		CA

User-Agent

Mozilla/5.0 (compatible& Googlebot/2.1& +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

10

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	109.102.226.187		RO
2	82.208.160.181	cylex.email	RO
3	82.208.160.180		RO
4	54.173.156.66	ec2-54-173-156-66.compute-1.amazonaws.com	US
5	54.173.93.131	ec2-54-173-93-131.compute-1.amazonaws.com	US
6	54.173.65.68	ec2-54-173-65-68.compute-1.amazonaws.com	US
7	54.165.97.142	ec2-54-165-97-142.compute-1.amazonaws.com	US
8	54.86.42.42	ec2-54-86-42-42.compute-1.amazonaws.com	US
9	52.91.96.36	ec2-52-91-96-36.compute-1.amazonaws.com	US
10	52.91.3.200	ec2-52-91-3-200.compute-1.amazonaws.com	US

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html

爬虫类别

抓取工具

首次出现时间

2021-08-19 02:19:15

最后一次出现时间

2021-08-19 02:26:52

是否遵守 robots.txt 协议

遵守

IP 地址总数

29

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	34.253.227.204	c2-34-253-227-204.eu-west-1.compute.amazonaws.com	IE
2	45.10.166.70		GB
3	206.196.111.211	1anichehosting.com	US
4	202.134.14.155	gprss220.robi.com.bd	BD
5	193.203.9.69		GB
6	192.241.235.210		US
7	186.202.183.104	pleskcl0222.hospedagemdesites.ws	BR
8	173.208.195.18		US
9	167.10.240.1		US
10	115.84.92.84		LA

注：最多只显示10个 IP 地址

User-Agent

Googlebot/2.1 (http://www.google.bot.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	103.83.247.160		IN
2	103.38.15.67		IN

User-Agent

Googlebot/2.1 (http://www.googlebot.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

3

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	217.16.188.56	titan.tomatom.cz	CZ
2	185.71.41.106		CZ
3	173.167.254.35	173-167-254-35-ip-static.hfc.comcastbusiness.net	US

User-Agent

Mozilla/5.0 (compatible; Gecko/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	98.17.130.79		US

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	213.152.161.170	.	NL

User-Agent

Mozilla/4.0 (compatible; MSIE 6.0;Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

4

爬虫 IP 地址列表

#	IP 地址	国家代码
1	172.69.55.135	NL
2	172.69.54.56	NL
3	162.158.111.36	US
4	141.101.77.55	US

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) HAL/9000

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	108.206.7.62	adsl-108-206-7-62.dsl.spf2mo.sbcglobal.net	US

User-Agent

Google Bot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	198.136.62.198	198-136-62-198.static.dimenoc.com	US
2	104.255.69.16		NL

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

68

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	217.12.204.250	ds22.friendhosting.net	UA
2	216.10.250.135		IN
3	213.149.103.132	t-com-serveri.132.crnagora.net	ME
4	202.155.107.19		ID
5	198.57.247.237	veedubstuff.co.uk	US
6	198.57.247.202	oldmastersonline.com	US
7	198.1.79.171	server.yuneoh.com	US
8	192.254.250.16	gator3291.hostgator.com	US
9	192.254.74.90	shared011.hosixy.com	US
10	192.185.4.144	gator4132.hostgator.com	US

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (Windows NT 5.1; cs_CZ;) GoogleBot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	151.80.97.162	ns397966.ip-151-80-97.eu	FR

User-Agent

GoogleBot 1.0

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

7

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	185.112.142.117	117-142-112-185.users.tritel.net.ru	UA
2	95.215.2.58		RU
3	46.162.9.196		UA
4	46.160.85.211		UA
5	31.202.241.245		UA
6	31.202.222.17		UA
7	31.202.216.156		UA

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1; actually this is http://ismyblogworking.com/)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	204.232.202.19	204-232-202-19.static.cloud-ips.com	US

User-Agent

Googlebot/2.1 (+http://www.google.com/bot.html; For abuse: kilobyte2007@gmail.com)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	54.186.147.14	ec2-54-186-147-14.us-west-2.compute.amazonaws.com	US

User-Agent

yahoo/Nutch-1.2 (yahoo; yahoo.com)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	223.78.184.67		CN

User-Agent

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html\x09

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	27.209.177.222		CN

User-Agent

gMozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	113.22.140.66		VN

User-Agent

Mozilla/5.0(compatible;Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	80.88.205.114	205.88.80.in-addr.arpa.orbital.net	GB
2	49.36.129.210		IN

User-Agent

Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html

爬虫类别

抓取工具

首次出现时间

2021-09-04 07:46:01

最后一次出现时间

2022-01-22 01:45:38

是否遵守 robots.txt 协议

遵守

IP 地址总数

5

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	211.99.99.168		CN
2	222.186.57.109		CN
3	220.231.216.115		CN
4	96.44.186.212	96.44.186.212.static.quadranet.com	US
5	39.98.213.1		CN

User-Agent

Mozilla/5.0 (Linux; Android 9; ru-ru; Mi A2 Lite Build/PKQ1.180917.001;) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Version/4.0 Chrome/74.0.3729.157 Mobile Safari/537.36

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	185.69.186.240		TM

User-Agent

Mozilla/5.0 (Linux; Android 9; ru-ru; Mi A2 Lite Build/PKQ1.180917.001;) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Version/4.0 Chrome/44.0.2403.119 Mobile Safari/537.36

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	185.69.186.71		TM

User-Agent

LinkedInBot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	192.71.76.144		SE

User-Agent

Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

爬虫类别

抓取工具

首次出现时间

2021-11-24 01:41:36

最后一次出现时间

2022-02-16 08:08:02

是否遵守 robots.txt 协议

遵守

IP 地址总数

5

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	113.245.8.102		CN
2	119.3.124.78	ecs-119-3-124-78.compute.hwclouds-dns.com	CN
3	154.39.253.152		CN
4	14.29.180.18		CN
5	222.231.9.170		KR

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1;http://www.google.com/bot.html

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	216.108.180.88	d216-108-180-88.nt.northwestel.net	CA

User-Agent

Mozilla/5.0+(compatible;+Googlebot/2.1;++http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

2021-08-14 08:12:54

最后一次出现时间

2022-04-27 21:34:18

是否遵守 robots.txt 协议

遵守

IP 地址总数

114

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	119.29.155.166		CN
2	120.229.153.114		CN
3	59.53.224.18	18.224.53.59.broad.nc.jx.dynamic.163data.com.cn	CN
4	182.98.168.233		CN
5	182.87.83.159		CN
6	59.53.169.129	129.169.53.59.broad.nc.jx.dynamic.163data.com.cn	CN
7	182.84.231.80		CN
8	59.53.226.55	55.226.53.59.broad.nc.jx.dynamic.163data.com.cn	CN
9	59.53.169.171	171.169.53.59.broad.nc.jx.dynamic.163data.com.cn	CN
10	59.53.227.36	36.227.53.59.broad.nc.jx.dynamic.163data.com.cn	CN

注：最多只显示10个 IP 地址

User-Agent

Mozilla/3.0 (iPhone; CPU iPhone OS 10_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/10.0 Mobile/13B143 Safari/601.1 (compatible; AdsBot-Google-Mobile; +https://www.google.com/mobile/adsbot.html1571539337208

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	199.249.230.68	tor45.quintex.com	US
2	89.46.125.39	tor-relay.netshelter.de	DE

User-Agent

Mozilla/5.0(compatible; Googlebot/2.1; + http://www.google.com/bo.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	79.2.139.1	host1-139-static.2-79-b.business.telecomitalia.it	IT

User-Agent

Mozilla/5.1 (Windows NT 6.0; WOW64) AppleWebKit/537.37 (KHTML, like Gecko) Chrome/58.0.1145.75 Safari/537.37 _x_uv_o_debug_ googlebot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

3

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	198.199.100.240	vamo.tw	US
2	166.62.39.111	ip-166-62-39-111.ip.secureserver.net	US
3	162.243.126.96		US

User-Agent

Googlebot/3.0 Accept: */*

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	31.14.40.232		RO

User-Agent

Googlebot/2.1\xc2\xa0(+http://www.googlebot.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	49.4.11.176	ecs-49-4-11-176.compute.hwclouds-dns.com	CN

User-Agent

MoziMozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

5

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	184.170.245.4		US
2	134.19.179.243	243.179.19.134.in-addr.arpa	NL
3	104.200.129.66		US
4	85.187.91.135		BG
5	80.67.10.139	80.67.10.139.adsl.inet-telecom.org	SE

User-Agent

Mozilla/5.0 (compatible; Yahoo! Slurp;http://help.yahoo.com/help/us/ysearch/slurp)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	141.98.81.178		NL

User-Agent

AhrefsBot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	159.89.10.56		DE

User-Agent

Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_3) AppleWebKit/[WEBKIT_VERSION] (KHTML, like Gecko, Mediapartners-Google) Chrome/[CHROME_VERSION] Safari/[WEBKIT_VERSION]

爬虫类别

抓取工具

首次出现时间

2021-08-13 09:06:10

最后一次出现时间

2022-07-02 10:48:46

是否遵守 robots.txt 协议

遵守

IP 地址总数

166

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	66.249.91.78	rate-limited-proxy-66-249-91-78.google.com	US
2	66.249.91.79	rate-limited-proxy-66-249-91-79.google.com	US
3	66.249.91.87	rate-limited-proxy-66-249-91-87.google.com	US
4	66.249.91.86	rate-limited-proxy-66-249-91-86.google.com	US
5	66.249.91.88	rate-limited-proxy-66-249-91-88.google.com	US
6	31.129.3.207	207.3.129.31.sub.tsl.ru	RU
7	72.14.199.6	rate-limited-proxy-72-14-199-6.google.com	US
8	72.14.199.8	rate-limited-proxy-72-14-199-8.google.com	US
9	72.14.199.10	rate-limited-proxy-72-14-199-10.google.com	US
10	72.14.199.16	rate-limited-proxy-72-14-199-16.google.com	US

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	213.185.26.133	h213-185-26-133.cust.a3fiber.se	SE

User-Agent

msnbot/1.1 ( http://search.msn.com/msnbot.htm)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	172.98.193.62	relay2.backplanedns.org	US
2	37.46.114.113	bg.as51430.net	BG

User-Agent

Mozilla/5.0 (compatible; Bingbot/2.0; +http://www.bing.com/bingbot.htm)

爬虫类别

抓取工具

首次出现时间

2021-08-16 07:29:11

最后一次出现时间

2022-07-01 01:01:20

是否遵守 robots.txt 协议

遵守

IP 地址总数

1562

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	105.112.210.38		NG
2	185.29.8.52	ip-8-52.dataclub.info	SE
3	197.184.181.75	reverse.rain.network	ZA
4	93.182.109.131	93-182-109-131.netonline.net	TR
5	84.17.57.69	unn-84-17-57-69.cdn77.com	CN
6	41.216.201.194	reverse.rain.network	ZA
7	104.161.42.244	ipv4.at.readydedis.com	US
8	117.136.31.186		CN
9	102.165.193.114	102-165-193-114.cipherwave.net	ZA
10	191.101.210.232		AU

注：最多只显示10个 IP 地址

User-Agent

Mozilla / 5.0 (compat\xC3\xADvel; Googlebot / 2.1; + http: //www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	138.36.0.32	138-36-0-32.texnet.net.br	BR

User-Agent

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.0 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	188.121.15.11	cg2-gate8.net.internetunion.pl	PL

User-Agent

YahooBot/1.0

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	77.247.109.87		NL

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1; +Bolfing@Unicbot)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	193.17.194.226		CH

User-Agent

Mozilla/5.0 (iPhone ; CPU iPhone OS 9_1, par exemple Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible ; AdsBot-Google-Mobile ; +http://www.google.com/mobile/adsbot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	89.39.106.97		NL

User-Agent

Mozilla/5.0(Windows NT 6.1; Googlebot/2.1

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	89.98.106.40	dhcp-089-098-106-040.chello.nl	NL

User-Agent

archive.org_bot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	217.123.78.152	217-123-78-152.cable.dynamic.v4.ziggo.nl	NL

User-Agent

Mozilla/5.0(compatible;Baiduspider/2.0;+http://www.baidu.com/search/spider.html

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	14.215.176.10		CN
2	14.215.176.6		CN

User-Agent

Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Maxthon/5.0 Chrome/47.0.2526.73 Safari/537.36/Mozilla/5.0 (compatible; Google-Youtube-Links)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	41.68.84.208		EG

User-Agent

Mozilla/5.0 (iPhone; U; CPU iPhone OS) (compatible; Googlebot-Mobile/2.1; http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	178.17.170.178		MD

User-Agent

Mozilla/5.0 (compatible; YandexNews/4.0; +http://yandex.com/bots)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	51.89.208.17	ip17.ip-51-89-208.eu	GB

User-Agent

Baidu Spider(PC)=Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	125.59.201.237	cm125-59-201-237.hkcable.com.hk	CN

User-Agent

DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	185.220.101.236		NL

User-Agent

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	183.136.225.56		CN

User-Agent

NaverBot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	85.159.214.184	li730-184.members.linode.com	GB

User-Agent

AdsBot-Google ( http://www.google.com/adsbot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	185.10.68.254	254.68.10.185.ro.ovo.sc	SC

User-Agent

Mozilla/5.0 (compatible; YandexBlogs/0.99; robot; B; +http://yandex.com/bots) 1 readers

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	185.195.24.69	fb6.domengood.ru	RU

User-Agent

Mozilla/5.0 (compatible; Qwantbot/1.0; +https://qwantbot.net/)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

3

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	51.15.184.151	dmp4.skyeris.net	FR
2	51.15.184.112	dmp2.skyeris.net	FR
3	51.15.183.217	dmp1.skyeris.net	FR

User-Agent

googlebot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

3

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	109.254.254.16		RU
2	109.178.154.34	109-178-154-34.pat.ren.cosmote.net	GR
3	24.134.85.81	business-24-134-85-81.pool2.vodafone-ip.de	DE

User-Agent

Mozilla/5.0 (Linux; Android 4.0.2; en-us; Nexus 6 Build/JOP40D) AppleWebKit/635.19 (KHTML, like Gecko; googleweblight) Chrome/78.0.1025.162 Mobile Safari/635.19

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	185.80.140.13		YE

User-Agent

crawl-66-249-66-210.googlebot.com

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	188.83.248.45	bl18-248-45.dsl.telepac.pt	PT

User-Agent

Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko; Google Web Preview) Chrome/27.0.1453 Safari/537.36,gzip(gfe)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	91.144.130.24	91x144x130x24.static-business.tmn.ertelecom.ru	RU

User-Agent

Mozilla/5.0 (Windows NT 10.0; Win64; x64; Googlebot/2.1)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

139

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	223.25.77.121	223-25-77-121.myrepublic.com.sg	SG
2	217.165.24.186	bba169350.alshamil.net.ae	AE
3	213.122.101.190	host213-122-101-190.range213-122.btcentralplus.com	GB
4	213.16.150.155	213.16.150.155.dsl.dyn.forthnet.gr	GR
5	210.185.171.169		PH
6	206.74.78.137	206-74-78-137.cable.g01.scches.spirittelecom.com	US
7	203.159.251.2		TH
8	203.123.111.209	203-123-111-209.ip4.superloop.com	AU
9	203.109.25.132		KR
10	195.225.144.132	master.link.pl.ua	UA

注：最多只显示10个 IP 地址

User-Agent

Mozilla/1.0 (compatible; Snapbot/1.0; +http://www.snapchat.com)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	186.167.242.184		VE

User-Agent

facebookexternalhit/1.1; Mozilla/5.0 (compatible; WorksOgCrawler/1.0.0;)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	110.234.240.6		JP

User-Agent

Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html);

爬虫类别

抓取工具

首次出现时间

2021-08-18 01:34:53

最后一次出现时间

2021-12-17 08:35:35

是否遵守 robots.txt 协议

遵守

IP 地址总数

5

爬虫 IP 地址列表

#	IP 地址	国家代码
1	49.235.78.113	CN
2	101.34.213.154	CN
3	39.96.1.102	CN
4	117.50.154.16	CN
5	45.159.179.196	FR

User-Agent

Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.135 Safari/537.36 Google-Apps-Script

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	13.233.190.194	ec2-13-233-190-194.ap-south-1.compute.amazonaws.com	IN

User-Agent

Twitterbot

爬虫类别

抓取工具

首次出现时间

2021-08-19 09:32:13

最后一次出现时间

2021-09-22 16:54:49

是否遵守 robots.txt 协议

遵守

IP 地址总数

21

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	52.213.211.213	ec2-52-213-211-213.eu-west-1.compute.amazonaws.com	IE
2	63.33.217.69	ec2-63-33-217-69.eu-west-1.compute.amazonaws.com	IE
3	54.74.198.203	ec2-54-74-198-203.eu-west-1.compute.amazonaws.com	IE
4	34.252.31.133	ec2-34-252-31-133.eu-west-1.compute.amazonaws.com	IE
5	34.252.187.237	ec2-34-252-187-237.eu-west-1.compute.amazonaws.com	IE
6	34.241.195.179	ec2-34-241-195-179.eu-west-1.compute.amazonaws.com	IE
7	34.250.0.210	ec2-34-250-0-210.eu-west-1.compute.amazonaws.com	IE
8	54.74.216.111	ec2-54-74-216-111.eu-west-1.compute.amazonaws.com	IE
9	3.250.80.116	ec2-3-250-80-116.eu-west-1.compute.amazonaws.com	IE
10	34.251.36.180	ec2-34-251-36-180.eu-west-1.compute.amazonaws.com	IE

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (iPhone; U; CPU iPhone 0S 3.0 like Mac 0S X; en-us; compatible; Googlebot/2.1; http://www.google.com/bot.html; AppleWebKit/528.18(KHTML,like Gecko) Version/4.0 Mobile/7A341 Safari/528.16 UNTRUSTED/1.0

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	168.235.198.52		US

User-Agent

Googlebot-News

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	178.158.11.254		RU

User-Agent

Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_1) AppleWebKit/601.2.4 (KHTML, like Gecko) Version/9.0.1 Safari/601.2.4 facebookexternalhit/1.1 Facebot Twitterbot/1.0%28KHTML%2C+like+Gecko%29+Version%2F9.0.1+Safari%2F601.2.4+facebookexternalhit%2F1.1+Facebot+

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	46.151.8.12	ip-46-151-8-12.nemiya.com	RU

User-Agent

Mozilla/5.0 (Windows NT 6.2; rv:30.0) Gecko/20150101 Firefox/32.0 360Spider BaiduSpider Googlebot SogouSpider 360Spider

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	101.227.1.199		CN
2	101.227.1.197		CN

User-Agent

Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/%s Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	18.196.3.155	ec2-18-196-3-155.eu-central-1.compute.amazonaws.com	DE

User-Agent

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	217.230.82.254	pd9e652fe.dip0.t-ipconnect.de	DE

User-Agent

Amazonbot

爬虫类别

抓取工具

首次出现时间

None

最后一次出现时间

None

是否遵守 robots.txt 协议

遵守

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	212.182.63.154	apollo.cpu.lublin.pl	PL

User-Agent

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

2021-08-14 07:06:32

最后一次出现时间

2022-07-02 02:11:19

是否遵守 robots.txt 协议

不明

IP 地址总数

512

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	156.38.82.119		TG
2	20.9.12.133		US
3	41.216.201.213	reverse.rain.network	ZA
4	182.87.197.207		CN
5	105.112.210.38		NG
6	192.71.32.101		SE
7	102.165.193.187	102-165-193-187.cipherwave.net	ZA
8	194.14.85.185		SE
9	193.183.102.243		SE
10	173.91.217.177	cpe-173-91-217-177.neo.res.rr.com	US

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

爬虫类别

抓取工具

首次出现时间

2021-08-14 08:20:30

最后一次出现时间

2022-06-13 01:49:51

是否遵守 robots.txt 协议

不明

IP 地址总数

9

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	191.101.132.61		US
2	20.125.60.232		US
3	218.75.230.13		CN
4	157.55.42.90		US
5	157.55.26.175		US
6	89.108.117.126	u8824.col.agava.net	RU
7	157.55.103.51		US
8	157.55.37.44		US
9	52.162.161.148		US

User-Agent

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

爬虫类别

抓取工具

首次出现时间

2021-08-16 06:46:50

最后一次出现时间

2022-05-28 03:32:12

是否遵守 robots.txt 协议

不明

IP 地址总数

206

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	118.165.195.234	118-165-195-234.dynamic-ip.hinet.net	TW
2	111.249.221.6	111-249-221-6.dynamic-ip.hinet.net	TW
3	111.249.223.88	111-249-223-88.dynamic-ip.hinet.net	TW
4	61.241.55.159		CN
5	114.41.15.232	114-41-15-232.dynamic-ip.hinet.net	TW
6	175.182.7.184	175-182-7-184.adsl.dynamic.seed.net.tw	TW
7	36.229.156.82	36-229-156-82.dynamic-ip.hinet.net	TW
8	106.104.102.30	106-104-102-30.adsl.static.seed.net.tw	TW
9	36.229.197.237	36-229-197-237.dynamic-ip.hinet.net	TW
10	118.165.183.16	118-165-183-16.dynamic-ip.hinet.net	TW

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

爬虫类别

抓取工具

首次出现时间

2021-08-16 07:43:03

最后一次出现时间

2022-06-17 02:35:33

是否遵守 robots.txt 协议

不明

IP 地址总数

19

爬虫 IP 地址列表

#	IP 地址	国家代码
1	103.143.29.209	CN
2	47.97.166.113	CN
3	59.58.216.147	CN
4	125.79.89.217	CN
5	140.237.230.40	CN
6	125.79.89.204	CN
7	59.58.216.105	CN
8	120.43.89.228	CN
9	110.88.232.55	CN
10	120.43.89.6	CN

注：最多只显示10个 IP 地址

User-Agent

Baiduspider+(+http://www.baidu.com/search/spider.htm)

爬虫类别

抓取工具

首次出现时间

2021-08-16 08:27:24

最后一次出现时间

2021-12-14 06:13:31

是否遵守 robots.txt 协议

不明

IP 地址总数

5

爬虫 IP 地址列表

#	IP 地址	国家代码
1	140.249.15.176	CN
2	36.142.186.6	CN
3	122.228.19.71	CN
4	221.232.131.46	CN
5	58.48.189.166	CN

User-Agent

Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.75 Safari/537.36 Google Favicon

爬虫类别

抓取工具

首次出现时间

2021-08-17 08:48:49

最后一次出现时间

2021-10-22 02:54:17

是否遵守 robots.txt 协议

不明

IP 地址总数

83

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	222.174.146.131		CN
2	68.196.42.121	ool-44c42a79.dyn.optonline.net	US
3	2001:b400:e286:e22b:6d1a:3e25:3bb8:a8d9	2001-b400-e286-e22b-6d1a-3e25-3bb8-a8d9.emome-ip6.hinet.net	TW
4	2406:da18:7be:400:8387:f418:d69b:7253		SG
5	119.123.66.227		CN
6	98.2.225.4	mta-98-2-225-4.maine.rr.com	US
7	66.188.206.210	066-188-206-210.res.spectrum.com	US
8	211.22.98.94	211-22-98-94.hinet-ip.hinet.net	TW
9	153.122.173.208	153.122.173.20	JP
10	124.244.92.72	124244092072.ctinets.com	CN

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)

爬虫类别

抓取工具

首次出现时间

2021-08-24 09:34:32

最后一次出现时间

2022-03-19 02:40:43

是否遵守 robots.txt 协议

不明

IP 地址总数

7

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	20.151.200.230		CA
2	41.198.133.38		MU
3	92.7.254.66	host-92-7-254-66.as13285.net	GB
4	47.57.232.80		CN
5	197.185.96.189	rain-197-185-96-189.rain.network	ZA
6	104.128.188.83		US
7	197.185.97.144	rain-197-185-97-144.rain.network	ZA

User-Agent

Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/534+ (KHTML, like Gecko) BingPreview/1.0b

爬虫类别

抓取工具

首次出现时间

2021-08-24 15:28:22

最后一次出现时间

2021-08-24 15:28:22

是否遵守 robots.txt 协议

不明

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	109.102.111.58		RO

User-Agent

Mozilla/5.0 (Linux; Android 4.2.1; en-us; Nexus 5 Build/JOP40D) AppleWebKit/535.19 (KHTML, like Gecko; googleweblight) Chrome/38.0.1025.166 Mobile Safari/535.19

爬虫类别

抓取工具

首次出现时间

2021-09-09 01:57:19

最后一次出现时间

2021-11-04 01:00:04

是否遵守 robots.txt 协议

不明

IP 地址总数

17

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码
1	156.38.52.40		LY
2	129.0.213.220	host-129.0.213.220.mtn.cm	CM
3	177.104.252.21	177-104-252-21.gbsn.com.br	BR
4	2a01:9700:159f:ca00:613e:861c:33e9:f551		JO
5	2001:16a2:4c19:1f21:c809:66ca:3fbf:2640		SA
6	2001:16a2:c074:9f0e:98f1:2a00:9650:7c3e		SA
7	102.156.177.25		TN
8	156.206.139.216	host-156.206.216.139-static.tedata.net	EG
9	197.231.1.151		MR
10	2001:16a2:e4fe:d700:c53a:e2f7:c93:3578		SA

注：最多只显示10个 IP 地址

User-Agent

Mozilla/5.0 (Linux; Android 7.0; Moto G (4)) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4420.0 Mobile Safari/537.36 Chrome-Lighthouse

爬虫类别

抓取工具

首次出现时间

2021-09-14 08:06:42

最后一次出现时间

2021-09-14 08:06:42

是否遵守 robots.txt 协议

不明

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	20.62.156.255		US

User-Agent

Mozilla/5.0 (compatible; YandexMedia/3.0; +http://yandex.com/bots)

爬虫类别

抓取工具

首次出现时间

2021-10-07 02:15:27

最后一次出现时间

2022-06-13 01:51:31

是否遵守 robots.txt 协议

不明

IP 地址总数

3

爬虫 IP 地址列表

#	IP 地址	国家代码
1	159.65.230.52	US
2	137.184.99.219	US
3	68.183.135.246	US

User-Agent

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

2021-12-14 02:04:15

最后一次出现时间

2022-01-12 02:06:16

是否遵守 robots.txt 协议

不明

说明：

伪造 Google 搜索引擎蜘蛛，当前用户代理：Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

IP 地址总数

2

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	195.216.153.115	unused.sim-networks.com	DE
2	195.216.153.115		DE

User-Agent

Mozilla/5.0 ((Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.93 Safari/537.36; 360Spider SogouSpider

爬虫类别

抓取工具

首次出现时间

2022-03-30 00:58:57

最后一次出现时间

2022-03-30 00:58:57

是否遵守 robots.txt 协议

不明

说明：

fake 360spider 是 360 的伪造爬虫，当前 User-agent 为：Mozilla/5.0 ((Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.93 Safari/537.36; 360Spider SogouSpider

IP 地址总数

1

爬虫 IP 地址列表

#	IP 地址	Hostname	国家代码	旗帜
1	211.95.50.8		CN

User-Agent

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.121 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

爬虫类别

抓取工具

首次出现时间

2022-04-22 01:17:29

最后一次出现时间

2022-04-22 01:17:29

是否遵守 robots.txt 协议

不明

说明：

fake Googlebot 是伪造 Google 搜索引擎的爬虫程序，当前的 User-agent 为：Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.121 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

IP 地址总数

1

爬虫 IP 地址列表

</

#	IP 地址	Hostname	国家代码	旗帜
1	34.68.229.128	128.229.68.34.bc.googleusercontent.com	US