爬虫识别

搜狗蜘蛛更改 PTR 记录 了解详情

Pinterest bot

爬虫识别 - 资源 > 未分类 > Pinterest bot
Pinterest botPinterest bot 概况

缤趣

Pinterest bot

Pinterest bot status 活动

Pinterest bot 说明

Pinterest bot 是 Pinterest 创建的网络爬虫, 爬虫程序主要有如下功能:

  • 从你的网站目录下载每个产品的图片文件
  • 从网站收集各种元数据,例如产品价格、描述和可用性
  • 确保用户安全访问
Pinterestbot/1.0
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明:

Pinterestbot/1.0 是 Pinterest 开发的网络爬虫,主要目的是:抓取网站图片。

当前 User-agent 为:Mozilla/5.0 (compatible; Pinterestbot/1.0; +http://www.pinterest.com/bot.html)

Pinterestbot/1.0 遵守 robots.txt 协议,禁止抓取站点所有页面写法如下:

user-agent: Pinterestbot
disallow: /

同时可以限制 Pinterestbot/1.0 抓取速度:

user-agent: Pinterestbot
Crawl-delay: 2

Crawl-Delay 设置为 2,表示两个抓取之间有 2 秒的延迟。

IP 地址总数
254
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 54.236.1.11 crawl-54-236-1-11.pinterest.com US US flag
2 54.236.1.254 crawl-54-236-1-254.pinterest.com US US flag
3 54.236.1.253 crawl-54-236-1-253.pinterest.com US US flag
4 54.236.1.252 crawl-54-236-1-252.pinterest.com US US flag
5 54.236.1.251 crawl-54-236-1-251.pinterest.com US US flag
6 54.236.1.250 crawl-54-236-1-250.pinterest.com US US flag
7 54.236.1.249 crawl-54-236-1-249.pinterest.com US US flag
8 54.236.1.248 crawl-54-236-1-248.pinterest.com US US flag
9 54.236.1.247 crawl-54-236-1-247.pinterest.com US US flag
10 54.236.1.246 crawl-54-236-1-246.pinterest.com US US flag
注:最多只显示10个 IP 地址
返回顶部