爬虫识别

Google 推出了一个名为 GoogleOther 的新爬虫 了解详情

bitlybot

bitlybotbitlybot 概况

Bitly, Inc.

bitlybot status 活动

bitlybot 说明

链接缩短器。

bitlybot
User-Agent
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
IP 地址总数
27
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 184.72.13.87 ec2-184-72-13-87.us-west-1.compute.amazonaws.com US US flag
2 184.73.103.216 ec2-184-73-103-216.compute-1.amazonaws.com US US flag
3 184.72.158.161 ec2-184-72-158-161.compute-1.amazonaws.com US US flag
4 174.129.157.215 ec2-174-129-157-215.compute-1.amazonaws.com US US flag
5 174.129.157.195 ec2-174-129-157-195.compute-1.amazonaws.com US US flag
6 174.129.155.45 ec2-174-129-155-45.compute-1.amazonaws.com US US flag
7 107.22.98.172 ec2-107-22-98-172.compute-1.amazonaws.com US US flag
8 107.22.80.26 ec2-107-22-80-26.compute-1.amazonaws.com US US flag
9 107.22.42.94 ec2-107-22-42-94.compute-1.amazonaws.com US US flag
10 107.20.32.80 ec2-107-20-32-80.compute-1.amazonaws.com US US flag
注:最多只显示10个 IP 地址
bitlybot/3.0
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
IP 地址总数
21
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 3.94.163.211 ec2-3-94-163-211.compute-1.amazonaws.com US US flag
2 34.224.89.159 ec2-34-224-89-159.compute-1.amazonaws.com US US flag
3 34.86.177.154 154.177.86.34.bc.googleusercontent.com US US flag
4 184.73.124.118 ec2-184-73-124-118.compute-1.amazonaws.com US US flag
5 107.22.104.94 ec2-107-22-104-94.compute-1.amazonaws.com US US flag
6 107.20.57.185 ec2-107-20-57-185.compute-1.amazonaws.com US US flag
7 107.20.5.123 ec2-107-20-5-123.compute-1.amazonaws.com US US flag
8 52.201.235.168 ec2-52-201-235-168.compute-1.amazonaws.com US US flag
9 54.86.37.102 ec2-54-86-37-102.compute-1.amazonaws.com US US flag
10 34.230.78.27 ec2-34-230-78-27.compute-1.amazonaws.com US US flag
注:最多只显示10个 IP 地址
bitlybot/2.0
User-Agent
爬虫类别
是否遵守 robots.txt 协议
遵守
IP 地址总数
2
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 54.147.4.25 ec2-54-147-4-25.compute-1.amazonaws.com US US flag
2 50.19.1.73 ec2-50-19-1-73.compute-1.amazonaws.com US US flag
bitlybot/4.0
爬虫类别
是否遵守 robots.txt 协议
遵守
IP 地址总数
2
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 34.67.7.166 166.7.67.34.bc.googleusercontent.com US US flag
2 34.67.55.184 184.55.67.34.bc.googleusercontent.com US US flag
返回顶部