1. 爱易网页
  2. Java教程
  3. 有关网络爬虫速度,该怎么处理

有关网络爬虫速度,该怎么处理

日期：2014-05-20　 浏览次数：21051 次

有关网络爬虫速度
最近在写了个爬虫，在一个网站爬东西，但是爬取页面比较多，被封ip了，虽然他允许输入验证码解封，但是数据量比较大，不能一直这样做，如何降低自己的速度，或者流量之类的，防止出现这种情况

------解决方案--------------------
Thread.sleep(10*1000); 然线程歇个10秒

相关资料更多>

  1. 至于FTP程序 列出文件夹下的所有文件名 并进行重命名 高分求一段程序
  2. ，JSP网站速度变慢，如何优化
  3. tomcat如何获取每一个接口（url）的上下行流量分别是多少
  4. 111,该怎么解决
  5. 急啊，怎么解决JAVA HEAP SPACE错误
  6. jsp中表达式的疑惑.该如何处理
  7. Spring 怎么读取properties文件
  8. 怎么能解压带密码的Zip文件
  9. mysql :Data too long for column,该怎么解决