是否应该让 GPTBot/1.2 抓取网站 了解详情
NetShelter ContentScan 是 inPowered, Inc. 开发的内容爬虫 (AI crawler),主要用于 内容扫描 +分析,不是典型的恶意爬虫。
NetShelter ContentScan 的主要功能是对网站内容进行扫描 (crawl),并收集页面结构 (structure)、关键词 (keywords)、元数据 (metadata) 等信息。
| # | IP 地址 | Hostname | 国家代码 | 旗帜 |
|---|---|---|---|---|
| 1 | 54.204.115.211 | ec2-54-204-115-211.compute-1.amazonaws.com | US |
|
| 2 | 54.237.108.189 | ec2-54-237-108-189.compute-1.amazonaws.com | US |
|
| 3 | 54.205.121.52 | ec2-54-205-121-52.compute-1.amazonaws.com | US |
|
| 4 | 54.157.163.187 | ec2-54-157-163-187.compute-1.amazonaws.com | US |
|