当前位置:  开发笔记 > 后端 > 正文

Web爬网程序在重复请求Web服务器之间等待的最佳持续时间是多少

如何解决《Web爬网程序在重复请求Web服务器之间等待的最佳持续时间是多少》经验,为你挑选了0个好方法。
如何解决《Web爬网程序在重复请求Web服务器之间等待的最佳持续时间是多少》经验,为你挑选了0个好方法。

是否有一些标准的持续时间,爬虫必须在重复命中到同一服务器之间等待,以免使服务器负担过重.

如果没有,任何关于什么可以是一个良好的等待时间的爬虫被认为礼貌的建议.

此值是否因服务器而异...如果是这样,如何确定它?

推荐阅读
和谐啄木鸟
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有