1. 爱易网页
  2. Java教程
  3. 有关网络爬虫速度,该怎么处理

有关网络爬虫速度,该怎么处理

日期：2014-05-20　 浏览次数：21264 次

有关网络爬虫速度
最近在写了个爬虫，在一个网站爬东西，但是爬取页面比较多，被封ip了，虽然他允许输入验证码解封，但是数据量比较大，不能一直这样做，如何降低自己的速度，或者流量之类的，防止出现这种情况

------解决方案--------------------
Thread.sleep(10*1000); 然线程歇个10秒

相关资料更多>

  1. package和imorpt的有关问题
  2. struts2中ava.lang.NoClassDefFoundError: org/apache/struts2/util/ObjectFactoryDest解决方案
  3. 关于 if(rs.getString("").trim().equals(""))解决办法
  4. 买了一款安卓2.2.1系统的手机，想自己编下软件，要看些什么书和资料解决方法
  5. 收藏 Java菜鸟，上周六程序设计答辩，窗体设计，在网下找的程序，想自己加个菜单，帮助菜单项怎么实现？望前辈们指导一上，很急谢啦！ [有关问题点数：40
  6. poi 中施用html样式
  7. eclipse创建不了jsp项目，就是web项目，小弟我不想用myeclipse，怎么处理，有什么插件
  8. 初学者求一sql语句!
  9. sql 语句,该如何解决