爬虫识别

是否应该让 GPTBot/1.2 抓取网站 了解详情

GPTBot

GPTBotGPTBot 概况

OpenAI OpCo, LLC

GPTBot

GPTBot status 活动

GPTBot 说明

使用 GPTBot 用户代理抓取的网页可能会用于改进未来的模型,并会进行过滤以删除需要付费墙访问、已知主要汇总个人身份信息 (PII) 或包含违反我们政策的文本的来源。允许 GPTBot 访问您的网站可以帮助 AI 模型变得更加准确,并提高其一般能力和安全性。

GPTBot/1.0
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明:

要禁止 GPTBot 访问您的网站,您可以将 GPTBot 添加到您网站的 robots.txt 中:

User-agent: GPTBot
Disallow: /

自定义 GPTBot 访问

为了允许 GPTBot 仅访问您网站的部分内容,您可以将 GPTBot 令牌添加到您网站的 robots.txt 中,如下所示:

User-agent: GPTBot
Allow: /directory-1/
Disallow: /directory-2/
IP 地址总数
509
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 52.230.152.169 US US flag
2 52.230.152.73 US US flag
3 52.230.152.11 US US flag
4 52.230.152.214 US US flag
5 52.233.106.254 US US flag
6 52.233.106.253 US US flag
7 52.233.106.252 US US flag
8 52.233.106.251 US US flag
9 52.233.106.250 US US flag
10 52.233.106.249 US US flag
注:最多只显示10个 IP 地址
GPTBot/1.2
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明:

要禁止 GPTBot 访问您的网站,您可以将 GPTBot 添加到您网站的 robots.txt 中:

User-agent: GPTBot
Disallow: /

自定义 GPTBot 访问

为了允许 GPTBot 仅访问您网站的部分内容,您可以将 GPTBot 令牌添加到您网站的 robots.txt 中,如下所示:

User-agent: GPTBot
Allow: /directory-1/
Disallow: /directory-2/
IP 地址总数
657
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 20.171.207.140 US US flag
2 20.171.207.228 US US flag
3 20.171.207.83 US US flag
4 20.171.207.19 US US flag
5 20.171.207.122 US US flag
6 20.171.207.94 US US flag
7 20.171.207.88 US US flag
8 20.171.207.130 US US flag
9 20.171.207.112 US US flag
10 20.171.207.118 US US flag
注:最多只显示10个 IP 地址
ChatGPT-User/1.0
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明:

ChatGPT-User/1.0属于 OpenAI 的 ChatGPT-User 爬虫。​它是 ChatGPT 插件系统的一部分,​用于在用户请求时代表 ChatGPT 访问特定网页,​而非自动化地全站爬取内容。​其主要用途是为用户提供实时信息,​如摘要、翻译或提取网页内容。

ChatGPT-User/1.0 遵守 robots.txt 协议

允许访问特定目录:

User-agent: ChatGPT-User
Allow: /allowed-directory/
Disallow: /

完全禁止访问:

  User-agent: ChatGPT-User
  Disallow: /
IP 地址总数
1515
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 4.196.118.122 US US flag
2 20.194.157.191 JP JP flag
3 20.215.220.210 US US flag
4 13.76.223.48 SG SG flag
5 40.67.183.166 US US flag
6 20.215.220.222 US US flag
7 20.194.1.14 KR KR flag
8 172.213.21.120 US US flag
9 52.230.163.35 US US flag
10 52.173.235.92 US US flag
注:最多只显示10个 IP 地址
OAI-SearchBot/1.0
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明:

​OAI-SearchBot 是 OpenAI 推出的网页爬虫,主要用于其搜索引擎产品 SearchGPT 的内容索引。

禁止访问

如果您不希望 OAI-SearchBot 访问您的网站,可以在 robots.txt 文件中添加以下规则:

User-agent: OAI-SearchBot 
Disallow: /
IP 地址总数
536
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 172.203.190.139 US US flag
2 135.234.64.254 US US flag
3 135.234.64.253 US US flag
4 135.234.64.252 US US flag
5 135.234.64.251 US US flag
6 135.234.64.250 US US flag
7 135.234.64.249 US US flag
8 135.234.64.248 US US flag
9 135.234.64.247 US US flag
10 135.234.64.246 US US flag
注:最多只显示10个 IP 地址
OAI-SearchBot/1.0
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明:

OAI-SearchBot 是 OpenAI 推出的网页爬虫,主要用于其搜索引擎产品 SearchGPT 的内容索引。

禁止访问:

如果您不希望 OAI-SearchBot 访问您的网站,可以在 robots.txt 文件中添加以下规则:

User-agent: OAI-SearchBot 
Disallow: /
IP 地址总数
510
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 74.7.229.58 US US flag
2 74.7.228.135 US US flag
3 74.7.229.19 US US flag
4 74.7.229.48 US US flag
5 74.7.229.14 US US flag
6 74.7.228.148 US US flag
7 74.7.229.44 US US flag
8 74.7.229.75 US US flag
9 74.7.228.133 US US flag
10 74.7.229.76 US US flag
注:最多只显示10个 IP 地址
OAI-SearchBot/1.3
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明:

OAI-SearchBot/1.3 是 OpenAI 推出的网页爬虫,主要用于其搜索引擎产品 SearchGPT 的内容索引。

禁止访问:

如果您不希望 OAI-SearchBot 访问您的网站,可以在 robots.txt 文件中添加以下规则:

User-agent: OAI-SearchBot 
Disallow: /
IP 地址总数
216
爬虫 IP 地址列表
# IP 地址 Hostname 国家代码 旗帜
1 74.7.229.5 US US flag
2 74.7.229.69 US US flag
3 74.7.229.219 US US flag
4 74.7.229.15 US US flag
5 74.7.228.151 US US flag
6 74.7.242.136 US US flag
7 74.7.229.218 US US flag
8 74.7.242.140 US US flag
9 74.7.243.13 US US flag
10 74.7.228.142 US US flag
注:最多只显示10个 IP 地址
OAI-SearchBot/1.3
爬虫类别
首次出现时间
是否遵守 robots.txt 协议
遵守
说明:

OAI-SearchBot/1.3 是 OpenAI 推出的网页爬虫,主要用于其搜索引擎产品 SearchGPT 的内容索引。

禁止访问:

如果您不希望 OAI-SearchBot 访问您的网站,可以在 robots.txt 文件中添加以下规则:

User-agent: OAI-SearchBot 
Disallow: /
IP 地址总数
0
返回顶部