本站不提供港澳台、国外IP资源。所有IP均为自营，我们会保留用户的对代理IP的请求日志，如有发现用户违法违规行为，我们会保留日志数据并举报到网监部门。用户不得传输或发表：煽动抗拒、破坏宪法和法律、行政法规实施的言论，煽动颠覆国家政权，推翻社会主义制度的言论，煽动分裂国家、破坏国家统一的的言论，煽动民族仇恨、民族歧视、破坏民族团结的言论；不得利用本站资源从事洗钱、窃取商业秘密、窃取个人信息等违法犯罪活动；不得侵入计算机信息系统或者采用其他技术手段，获取该计算机信息系统中存储、处理或者传输的数据，或者对该计算机信息系统实施非法控制；不得传输或发表任何违法犯罪的、骚扰性的、中伤他人的、辱骂性的、恐吓性的、伤害性的、庸俗的，淫秽的、不文明的等信息资料；不得传输或发表损害国家社会公共利益和涉及国家安全的信息资料或言论；不得发布任何侵犯他人著作权、商标权等知识产权或合法权利的内容；不可进行其他违反宪法和法律、行政法规、社会公德的行为。

[ 登录 ] - [ 注册 ] | 代码示例DEMO | IP测试视频

如何维护爬虫程序中的代理ip库？

作者：数据无忧时间：2020-09-18 13:24:53

问题描述：代理ip有的变得连接很慢，甚至连不上，有什么样的机制可以让ip列表保持较好的可用性？

不如创建一个验证代理的服务吧，定期扫描库存代理，更新可用性，遇到不可用的就删除或者标记。

网友回答

如果有能力，自己建独享代理IP服务器，很稳定，不存在所谓的失效。

否则通过购买动态代理IP的，要设置验证程序，把所有代理IP放在Redis或者其他文件中，按几分钟测试一遍，失效就删除。

无忧代理IP(www.data5u.com)原创文章，转载请注明出处。

新手上路
购买流程
购买流程
API使用方法

支付方式
在线支付
付款方式
发票开具

电话：4007-745-096

QQ：

周一至周日8：30-18：00 技术部电话热线

如何维护爬虫程序中的代理ip库？

新手上路

支付方式

常见问题

关于我们