是否应该让 GPTBot/1.2 抓取网站 了解详情
Mistral AI 使用网络爬虫(又称“机器人”)和用户代理来执行其产品的任务,这些任务既可以自动执行,也可以根据用户请求执行。为了方便网站管理员管理其网站和内容与 AI 的交互方式,Mistral AI 使用了特定的 robots.txt 标签。
MistralAI-User 这是用于Le Chat 中的用户操作。当用户向 Le Chat 提问时,它可能会访问一个网页来帮助解答,并在回复中包含指向该网页的链接。
| # | IP 地址 | Hostname | 国家代码 | 旗帜 |
|---|---|---|---|---|
| 1 | 4.225.216.254 | US |
|
|
| 2 | 20.240.139.18 | US |
|
|
| 3 | 51.12.243.114 | crawlers.mistral.ai | SE |
|
| 4 | 20.240.194.83 | crawlers.mistral.ai | US |
|
| 5 | 4.223.142.177 | US |
|
MistralAI-User 它控制着用户可以向哪些网站发出这些请求。它不会以任何自动方式抓取网页,也不会抓取内容用于生成式人工智能训练。
| # | IP 地址 | Hostname | 国家代码 | 旗帜 |
|---|---|---|---|---|
| 1 | 4.223.142.177 | US |
|