欢迎来到Doc100.Net免费学习资源知识分享平台!
您的位置:首页 > 程序异常 >

小弟我去扒网页的时候为什么老是被封

更新时间: 2014-01-05 00:49:04 责任编辑: Author_N1

 

我去扒网页的时候为什么老是被封
用的java eclipse
扒的网页也就是前四五百行,找一些公开的信息,没有用蜘蛛
url 是www.xxxx.com/type/00001.html ~99999.html

整理成csv->xls

但是老是被封,一封就是20到40分钟

对方公司也就40 50 人
貌似对方的人不可能反应这么快,是不是有自动封堵的机制?

怎么能不被封堵?
--参考方法--
间隔时间长点访问
--参考方法--
太快了,防ddos机制,一般同IP每秒10次请求就够封的条件了吧。
上一篇:上一篇
下一篇:下一篇

 

随机推荐程序问答结果

 

 

如对文章有任何疑问请提交到问题反馈,或者您对内容不满意,请您反馈给我们DOC100.NET论坛发贴求解。
DOC100.NET资源网,机器学习分类整理更新日期::2014-01-05 00:49:04
如需转载,请注明文章出处和来源网址:http://www.doc100.net/bugs/t/15/
本文WWW.DOC100.NET DOC100.NET版权所有。