是否应该让 GPTBot/1.2 抓取网站 了解详情
Ibou.io 运营着一项名为 IbouBot 的爬虫服务,用于构建并持续更新其对 万维网(World Wide Web) 的图谱化表示。该数据库及相关指标用于提供搜索引擎服务,不会将这些数据用于训练人工智能模型。
IbouBot/1.0 遵守 robots.txt 协议,如果需要延迟抓取:
User-agent: IbouBot
Crawl-Delay: [delayInSec]
阻止 IbouBot/1.0 抓取具体目录:
User-agent: IbouBot
Disallow: /wp-admin/
| # | IP 地址 | Hostname | 国家代码 | 旗帜 |
|---|---|---|---|---|
| 1 | 217.113.196.70 | c070.ibou.io | FR |
|
| 2 | 217.113.196.81 | c081.ibou.io | FR |
|
| 3 | 217.113.196.88 | c088.ibou.io | FR |
|
| 4 | 217.113.196.76 | c076.ibou.io | FR |
|
| 5 | 217.113.196.80 | c080.ibou.io | FR |
|
| 6 | 217.113.196.73 | c073.ibou.io | FR |
|
| 7 | 217.113.196.94 | c094.ibou.io | FR |
|
| 8 | 217.113.196.125 | c125.ibou.io | FR |
|
| 9 | 217.113.196.85 | c085.ibou.io | FR |
|
| 10 | 217.113.196.126 | c126.ibou.io | FR |
|