Skip to content

asolider/getpxy

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

23 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

#golang 实现抓取免费代理

依赖

  1. 数据存放在redis,需提前安装服务

实现功能

  1. 定时执行抓取
  2. 定时检查库存可用性

代理数据来源

  1. 66ip
  2. data5u
  3. goubanjia
  4. xici

优化

  1. 增加配置文件,目前配置(redis)暂写在逻辑代码里
  2. 继续增加代理源
  3. 提供http服务,输出可用的ip源

About

golang 实现抓取免费代理

Topics

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages