peer39 crawler 概况
活动 peer39_crawler/1.0
User-Agent
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明：
Peer39_crawler 的主要任务是抓取网页内容，以便 Peer39 提供的广告技术服务能够分析网页的上下文信息。这有助于广告主确保其广告出现在合适的内容环境中，从而提高广告的相关性和效果。
Peer39 官方表示，允许其爬虫访问网站可以帮助广告主更好地了解网页内容的适配性，从而提升用户体验和广告收益 。
Peer39_crawler 会在抓取网站前查找并遵循网站根目录下的 robots.txt 文件中的规则。
如果需要屏蔽 peer39_crawler/1.0 爬虫程序，写法如下：
User-agent: peer39_crawler
Disallow: /
IP 地址总数
26
爬虫 IP 地址列表
| # | IP 地址 | Hostname | 国家代码 | 旗帜 |
|---|---|---|---|---|
| 1 | 204.15.208.32 | US |
|
|
| 2 | 204.15.208.23 | US |
|
|
| 3 | 204.15.208.45 | US |
|
|
| 4 | 204.15.208.44 | US |
|
|
| 5 | 204.15.208.31 | US |
|
|
| 6 | 204.15.208.21 | US |
|
|
| 7 | 204.15.208.34 | US |
|
|
| 8 | 204.15.208.38 | US |
|
|
| 9 | 204.15.208.43 | US |
|
|
| 10 | 204.15.208.37 | US |
|
注：最多只显示10个 IP 地址
