Skip to content
GitLab
探索
登录
注册
yangxingxing
bookbar
里程碑
自动代理
开放中
里程碑
自动代理
里程碑 ID:15
为爬虫增加代理功能,主功能包括:
1、从代理网站爬取代理信息
2、通过代理检测模块提取有效代理
3、爬虫在可用代理中随机选取使用
扩展功能包括:
1、定时更新代理库
2、定时更新有效代理库
3、根据爬虫反馈随时从有效代理库中移除失效代理
其它
这个里程碑的所有议题都已关闭。现在您可以关闭这个里程碑。
议题
4
合并请求
1
参与者
2
标记
1