什么是 Comscore 爬虫

爬虫,也称为蜘蛛或机器人,是 Comscore 用来访问和访问网页内容的软件。

Comscore 爬虫:

  • 只下载静态的文本内容

  • 遵守robots.txt的规则

  • 不执行 JavaScript 来生成广告展示

  • 默认情况下以较慢的速度抓取

这篇文章是否对您有帮助?
如何改善这篇文章,使其对你更有帮助?
很有帮助
没有帮助

服务器出现错误,请稍后再试!