爬虫识别支持 IPv6 地址访问 了解详情
Baiduspider 是百度搜索引擎的一个自动程序,它的作用是访问互联网上的网页,建立索引数据库,使用户能在百度搜索引擎中搜索到您网站上的网页。
Baiduspider 是中国最重要的搜索引擎百度使用的爬行蜘蛛的正式名称。
为了给搜索用户更好的体验、对站点实现更好地索引和呈现,百度搜索需要访问网站的CSS、Javascript和图片信息,以便更精准地理解页面内容,实现搜索结果最优排名,百度搜索会全面启用最新UA来访问站点的上述资源。
Baiduspider-render/2.0不同于Baiduspider/2.0,Baiduspider-render/2.0可以获取Javascript内容,实现动态渲染。
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 116.179.37.252 | baiduspider-116-179-37-252.crawl.baidu.com | CN |
|
2 | 116.179.37.38 | baiduspider-116-179-37-38.crawl.baidu.com | CN |
|
3 | 116.179.37.116 | baiduspider-116-179-37-116.crawl.baidu.com | CN |
|
4 | 116.179.37.104 | baiduspider-116-179-37-104.crawl.baidu.com | CN |
|
5 | 116.179.37.165 | baiduspider-116-179-37-165.crawl.baidu.com | CN |
|
6 | 116.179.37.144 | baiduspider-116-179-37-144.crawl.baidu.com | CN |
|
7 | 116.179.37.229 | baiduspider-116-179-37-229.crawl.baidu.com | CN |
|
8 | 116.179.37.241 | baiduspider-116-179-37-241.crawl.baidu.com | CN |
|
9 | 116.179.37.206 | baiduspider-116-179-37-206.crawl.baidu.com | CN |
|
10 | 116.179.37.134 | baiduspider-116-179-37-134.crawl.baidu.com | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 119.63.196.113 | JP |
|
|
2 | 119.63.196.105 | JP |
|
|
3 | 119.63.196.55 | JP |
|
|
4 | 119.63.196.18 | JP |
|
|
5 | 119.63.196.103 | JP |
|
|
6 | 119.63.196.19 | JP |
|
|
7 | 119.63.196.82 | JP |
|
|
8 | 119.63.196.108 | JP |
|
|
9 | 119.63.196.56 | JP |
|
|
10 | 220.181.108.179 | baiduspider-220-181-108-179.crawl.baidu.com | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 119.63.199.22 | JP |
|
|
2 | 119.63.198.104 | baiduspider-119-63-198-104.crawl.baidu.jp | JP |
|
3 | 119.63.198.85 | baiduspider-119-63-198-85.crawl.baidu.jp | JP |
|
4 | 119.63.198.69 | baiduspider-119-63-198-69.crawl.baidu.jp | JP |
|
5 | 119.63.193.130 | JP |
|
|
6 | 119.63.193.129 | JP |
|
|
7 | 119.63.193.70 | JP |
|
|
8 | 119.63.193.63 | JP |
|
|
9 | 119.63.193.62 | JP |
|
|
10 | 119.63.193.56 | JP |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 220.181.108.145 | baiduspider-220-181-108-145.crawl.baidu.com | CN |
|
2 | 220.181.108.145 | baiduspider-220-181-108-145.crawl.baidu.com. | CN |
|
3 | 220.181.108.169 | baiduspider-220-181-108-169.crawl.baidu.com | CN |
|
4 | 220.181.108.82 | baiduspider-220-181-108-82.crawl.baidu.com | CN |
|
5 | 116.179.32.22 | baiduspider-116-179-32-22.crawl.baidu.com | CN |
|
6 | 116.179.32.40 | baiduspider-116-179-32-40.crawl.baidu.com | CN |
|
7 | 116.179.32.161 | baiduspider-116-179-32-161.crawl.baidu.com | CN |
|
8 | 116.179.32.23 | baiduspider-116-179-32-23.crawl.baidu.com | CN |
|
9 | 220.181.108.101 | baiduspider-220-181-108-101.crawl.baidu.com | CN |
|
10 | 220.181.108.110 | baiduspider-220-181-108-110.crawl.baidu.com | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 220.181.108.111 | baiduspider-220-181-108-111.crawl.baidu.com | CN |
|
2 | 220.181.108.147 | baiduspider-220-181-108-147.crawl.baidu.com | CN |
|
3 | 123.125.143.192 | CN |
|
|
4 | 123.125.67.213 | CN |
|
|
5 | 123.125.143.158 | CN |
|
|
6 | 220.181.51.81 | CN |
|
|
7 | 123.125.71.40 | baiduspider-123-125-71-30.crawl.baidu.com | CN |
|
8 | 220.181.108.112 | baiduspider-220-181-108-112.crawl.baidu.com | CN |
|
9 | 220.181.108.100 | baiduspider-220-181-108-100.crawl.baidu.com | CN |
|
10 | 123.125.71.106 | baiduspider-123-125-71-106.crawl.baidu.com | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 123.125.71.98 | baiduspider-123-125-71-98.crawl.baidu.com | CN |
|
2 | 123.125.71.106 | baiduspider-123-125-71-106.crawl.baidu.com | CN |
|
3 | 123.125.71.74 | baiduspider-123-125-71-74.crawl.baidu.com | CN |
|
4 | 123.125.71.90 | baiduspider-123-125-71-90.crawl.baidu.com | CN |
|
5 | 123.125.71.111 | baiduspider-123-125-71-111.crawl.baidu.com | CN |
|
6 | 123.125.71.33 | baiduspider-123-125-71-33.crawl.baidu.com | CN |
|
7 | 123.125.71.48 | baiduspider-123-125-71-48.crawl.baidu.com | CN |
|
8 | 123.125.71.73 | baiduspider-123-125-71-73.crawl.baidu.com | CN |
|
9 | 123.125.71.102 | baiduspider-123-125-71-102.crawl.baidu.com | CN |
|
10 | 123.125.71.77 | baiduspider-123-125-71-77.crawl.baidu.com | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 123.125.71.33 | baiduspider-123-125-71-33.crawl.baidu.com | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 220.181.108.109 | baiduspider-220-181-108-109.crawl.baidu.com | CN |
|
2 | 123.125.71.24 | baiduspider-123-125-71-24.crawl.baidu.com | CN |
|
3 | 220.181.108.110 | baiduspider-220-181-108-110.crawl.baidu.com | CN |
|
4 | 123.125.71.75 | baiduspider-123-125-71-75.crawl.baidu.com | CN |
|
5 | 220.181.108.162 | baiduspider-220-181-108-162.crawl.baidu.com | CN |
|
6 | 123.125.71.96 | baiduspider-123-125-71-96.crawl.baidu.com | CN |
|
7 | 123.125.71.36 | baiduspider-123-125-71-36.crawl.baidu.com | CN |
|
8 | 123.125.71.97 | baiduspider-123-125-71-97.crawl.baidu.com | CN |
|
9 | 220.181.108.108 | baiduspider-220-181-108-108.crawl.baidu.com | CN |
|
10 | 123.125.71.52 | baiduspider-123-125-71-52.crawl.baidu.com | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 116.179.32.235 | baiduspider-116-179-32-235.crawl.baidu.com | CN |
|
2 | 220.181.108.83 | baiduspider-220-181-108-83.crawl.baidu.com | CN |
|
3 | 116.179.32.21 | baiduspider-116-179-32-21.crawl.baidu.com | CN |
|
4 | 220.181.108.146 | baiduspider-220-181-108-146.crawl.baidu.com | CN |
|
5 | 116.179.32.161 | baiduspider-116-179-32-161.crawl.baidu.com | CN |
|
6 | 220.181.108.168 | baiduspider-220-181-108-168.crawl.baidu.com | CN |
|
7 | 116.179.32.149 | baiduspider-116-179-32-149.crawl.baidu.com | CN |
|
8 | 116.179.32.232 | baiduspider-116-179-32-232.crawl.baidu.com | CN |
|
9 | 220.181.108.104 | baiduspider-220-181-108-104.crawl.baidu.com | CN |
|
10 | 220.181.108.105 | baiduspider-220-181-108-105.crawl.baidu.com | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 116.179.37.107 | baiduspider-116-179-37-107.crawl.baidu.com | CN |
|
2 | 116.179.37.155 | baiduspider-116-179-37-155.crawl.baidu.com | CN |
|
3 | 116.179.37.211 | baiduspider-116-179-37-211.crawl.baidu.com | CN |
|
4 | 116.179.37.174 | baiduspider-116-179-37-174.crawl.baidu.com | CN |
|
5 | 116.179.37.223 | baiduspider-116-179-37-223.crawl.baidu.com | CN |
|
6 | 116.179.37.163 | baiduspider-116-179-37-163.crawl.baidu.com | CN |
|
7 | 116.179.37.153 | baiduspider-116-179-37-153.crawl.baidu.com | CN |
|
8 | 116.179.37.157 | baiduspider-116-179-37-157.crawl.baidu.com | CN |
|
9 | 116.179.37.5 | baiduspider-116-179-37-5.crawl.baidu.com | CN |
|
10 | 116.179.37.238 | baiduspider-116-179-37-238.crawl.baidu.com | CN |
|
Baiduspider/2.0是百度移动搜索和网站搜索的蜘蛛爬虫。
更过关于Baiduspider/2.0的信息参考这里:什么是Baiduspider/2.0
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 124.160.26.186 | CN |
|
|
2 | 60.190.226.179 | CN |
|
|
3 | 45.115.236.2 | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 39.156.65.121 | CN |
|
|
2 | 39.156.65.120 | CN |
|
|
3 | 39.156.65.119 | CN |
|
|
4 | 39.156.65.118 | CN |
|
|
5 | 39.156.65.117 | CN |
|
|
6 | 39.156.65.115 | CN |
|
|
7 | 39.156.65.113 | CN |
|
|
8 | 39.156.65.111 | CN |
|
|
9 | 39.156.65.106 | CN |
|
|
10 | 39.156.65.103 | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 39.156.65.89 | CN |
|
|
2 | 14.215.176.83 | CN |
|
|
3 | 14.215.176.16 | CN |
|
|
4 | 14.215.176.15 | CN |
|
|
5 | 14.215.176.7 | CN |
|
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 220.181.108.110 | baiduspider-220-181-108-110.crawl.baidu.com | CN |
|
2 | 220.181.108.144 | baiduspider-220-181-108-144.crawl.baidu.com | CN |
|
3 | 123.125.71.26 | baiduspider-123-125-71-26.crawl.baidu.com | CN |
|
4 | 220.181.108.81 | baiduspider-220-181-108-81.crawl.baidu.com | CN |
|
5 | 123.125.71.45 | baiduspider-123-125-71-45.crawl.baidu.com | CN |
|
6 | 220.181.108.107 | baiduspider-220-181-108-107.crawl.baidu.com | CN |
|
7 | 123.125.71.38 | baiduspider-123-125-71-38.crawl.baidu.com | CN |
|
8 | 220.181.108.142 | baiduspider-220-181-108-142.crawl.baidu.com | CN |
|
9 | 123.125.71.21 | baiduspider-123-125-71-21.crawl.baidu.com | CN |
|
10 | 220.181.108.184 | baiduspider-220-181-108-184.crawl.baidu.com | CN |
|
Baiduspider/2.0 是百度搜索引擎的蜘蛛用户代理,当前 User-agent 为:Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.htmlï¼
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 116.179.32.99 | baiduspider-116-179-32-99.crawl.baidu.com | CN |
|
当前 User-agent 为:Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/553.36 (KHTML, like Gecko) Chrome/74.0.2110.12 Safari/553.36
通过查询该 UA 对应的 IP 为百度搜索引擎爬虫。
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 220.181.108.183 | baiduspider-220-181-108-183.crawl.baidu.com | CN |
|
当前 User-agent 为:Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/553.39 (KHTML, like Gecko) Chrome/95.0.3264.16 Safari/553.39
通过查询该 UA 对应的 IP 为百度搜索引擎爬虫。
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 123.125.71.30 | baiduspider-123-125-71-30.crawl.baidu.com | CN |
|
Baiduspider/2.0 是百度移动搜索和网站搜索的蜘蛛爬虫。
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 220.181.108.95 | baiduspider-220-181-108-95.crawl.baidu.com | CN |
|
为了给搜索用户更好的体验、对站点实现更好地索引和呈现,百度搜索需要访问网站的 CSS、Javascript 和图片信息,以便更精准地理解页面内容,实现搜索结果最优排名,百度搜索会全面启用最新 UA 来访问站点的上述资源。
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 116.179.37.236 | baiduspider-116-179-37-236.crawl.baidu.com | CN |
|
2 | 116.179.37.14 | baiduspider-116-179-37-14.crawl.baidu.com | CN |
|
3 | 116.179.37.185 | baiduspider-116-179-37-185.crawl.baidu.com | CN |
|
4 | 116.179.37.11 | baiduspider-116-179-37-11.crawl.baidu.com | CN |
|
5 | 116.179.37.68 | baiduspider-116-179-37-68.crawl.baidu.com | CN |
|
6 | 116.179.37.128 | baiduspider-116-179-37-128.crawl.baidu.com | CN |
|
7 | 116.179.37.84 | baiduspider-116-179-37-84.crawl.baidu.com | CN |
|
8 | 116.179.37.92 | baiduspider-116-179-37-92.crawl.baidu.com | CN |
|
9 | 116.179.37.36 | baiduspider-116-179-37-36.crawl.baidu.com | CN |
|
10 | 116.179.37.3 | baiduspider-116-179-37-3.crawl.baidu.com | CN |
|
为了给搜索用户更好的体验、对站点实现更好地索引和呈现,百度搜索需要访问网站的 CSS、Javascript 和图片信息,以便更精准地理解页面内容,实现搜索结果最优排名,百度搜索会全面启用最新 UA 来访问站点的上述资源。
Baiduspider-render/2.0 不同于 Baiduspider/2.0,Baiduspider-render/2.0 可以获取 Javascript 内容,实现动态渲染。
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 116.179.37.105 | baiduspider-116-179-37-105.crawl.baidu.com | CN |
|
2 | 116.179.37.3 | baiduspider-116-179-37-3.crawl.baidu.com | CN |
|
3 | 116.179.37.29 | baiduspider-116-179-37-29.crawl.baidu.com | CN |
|
4 | 116.179.37.117 | baiduspider-116-179-37-117.crawl.baidu.com | CN |
|
5 | 116.179.37.186 | baiduspider-116-179-37-186.crawl.baidu.com | CN |
|
6 | 116.179.37.122 | baiduspider-116-179-37-122.crawl.baidu.com | CN |
|
7 | 116.179.37.120 | baiduspider-116-179-37-120.crawl.baidu.com | CN |
|
8 | 116.179.37.123 | baiduspider-116-179-37-123.crawl.baidu.com | CN |
|
9 | 116.179.37.229 | baiduspider-116-179-37-229.crawl.baidu.com | CN |
|
10 | 116.179.37.210 | baiduspider-116-179-37-210.crawl.baidu.com | CN |
|
为了给搜索用户更好的体验、对站点实现更好地索引和呈现,百度搜索需要访问网站的CSS、Javascript和图片信息,以便更精准地理解页面内容,实现搜索结果最优排名,百度搜索会全面启用最新UA来访问站点的上述资源。
Baiduspider-render/2.0不同于Baiduspider/2.0,Baiduspider-render/2.0可以获取 Javascript 内容,实现动态渲染。
如果你不希望 Baiduspider-render 访问你的网站,可以在 robots.txt 中添加以下规则:
User-agent: Baiduspider-render
Disallow: /
Baiduspider-render 将无法爬取你的整个网站。
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 116.179.37.217 | baiduspider-116-179-37-217.crawl.baidu.com | CN |
|
2 | 116.179.37.0 | baiduspider-116-179-37-0.crawl.baidu.com | CN |
|
3 | 116.179.37.65 | baiduspider-116-179-37-65.crawl.baidu.com | CN |
|
4 | 116.179.37.126 | baiduspider-116-179-37-126.crawl.baidu.com | CN |
|
5 | 116.179.37.128 | baiduspider-116-179-37-128.crawl.baidu.com | CN |
|
6 | 116.179.37.247 | baiduspider-116-179-37-247.crawl.baidu.com | CN |
|
7 | 116.179.37.82 | baiduspider-116-179-37-82.crawl.baidu.com | CN |
|
8 | 116.179.37.212 | baiduspider-116-179-37-212.crawl.baidu.com | CN |
|
9 | 116.179.37.135 | baiduspider-116-179-37-135.crawl.baidu.com | CN |
|
10 | 116.179.37.11 | baiduspider-116-179-37-11.crawl.baidu.com | CN |
|