爱易网
IT新闻
IT新闻
爱易资讯
网站搭建
云虚拟主机教程
云服务器教程
Apache教程
IIS教程
Nginx教程
网站策划
站长文章
推广教程
淘宝客教程
网页设计
HTML教程
XHTML教程
CSS教程
HTML5教程
CSS3教程
JavaSript基础
JQuery教程
Node.js教程
前端技术
Ajax教程
Js特效
Xml教程
平面设计
页面UI设计
photoshop教程
程序开发
AI人工智能
Asp教程
Php教程
Asp.Net教程
Net Core教程
C#教程
Java教程
Jsp教程
开发技术
微信小程序教程
Uniapp开发教程
微信公众号开发
Andriod教程
IOS教程
DOS教程
Python教程
Docker教程
Windows Container教程
数据库
MSSQL教程
MySQL教程
Redis教程
Access教程
Oracle教程
数据库教程
操作系统
Linux教程
Windows教程
MAC教程
Cisco教程
交换机教程
防火墙教程
搜索
爱易网页
Java教程
有关网络爬虫速度,该怎么处理
有关网络爬虫速度,该怎么处理
日期:2014-05-20 浏览次数:20725 次
有关网络爬虫速度
最近在写了个爬虫,在一个网站爬东西,但是爬取页面比较多,被封ip了,虽然他允许输入验证码解封,但是数据量比较大,不能一直这样做,如何降低自己的速度,或者流量之类的,防止出现这种情况
------解决方案--------------------
Thread.sleep(10*1000); 然线程歇个10秒
上一篇: commons-pool.jar 有关问题
下一篇: java怎么解析mp3文件
免责声明:
本文仅代表作者个人观点,与爱易网无关。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。
相关资料
更多>
一个小异常
父类引用指向子类对象的有关问题
java web 跳转不到,该怎么解决
开源:获取信箱好友列表系统源代码(支持各大主流邮箱包括msn)
使用servlet报找不到相关的类的错,该怎么解决
java.sql.SQLException: ORA-28000: the account is locked
新手代码有关问题,关于用户名和密码判断正确否
kindeditor 下传图片有关问题,疑问。大家帮上忙,多谢
【讨论】有没有对Java内存泄漏有研究的,该如何解决
推荐阅读
更多>
java之JDK跟JRE以及各版本的区别
Java电子书大全,该怎么解决
为何IE下的CSDN回复框没有编辑选项
struts1.x包孕嵌套List的多行提交
分享:让人懊恼的面试-看程序员的基本功,该怎么解决
jsp整合discuz2.5解决思路
c++与java失去不同的答案
Struts+Hibernate的有关问题.请高手来帮帮忙吧
小弟刚刚接触java,请高手赐教一个java代码读txt文件的方法
重新问struts2防止重复提交的有关问题,上个贴没说明白有关问题
J2ME的代码从Eclipse拷进Jbuilder2005中运行不出来
怎么做一个有实力的J2EE开发人员
【100分】怎么监控多台服务器的log,alert,error
csdn怎么换头像哇,小弟我如何没找到,看到的顶起、
生成静态页面时出现乱码的有关问题!
软件测试工的职业生涯怎么去规划,求各位大侠指点,不胜感激
* org.hibernate.impl.QueryImpl * 错误
,如何把javaweb项目发布到互联网上!(答案)
ssh搭建有关问题,请教这是什么错误,小弟我在学习实在找不出来了
帮朋友问,北京嵌入式培训解决方法