cookies池

该cookies池的搭建参考了崔庆才大大的新书<Python3 网络爬虫开发实战>，并在此基础上对架构和部分代码做了优化， 增加了拉勾网与github的模拟登录方法，后续会根据需要增加其它网站，在此对崔大大提供的技术支持表示感谢。

pip install requests

pip install beautifulsoup4

pip install redis

pip install flask

本次数据库存储使用非关系型数据库redis，需要下载安装，官网地址：https://redis.io

提供了两种调用方式：

1、url调用：导入cookies模块，调用start_cps()方法运行cookies池，然后访问"https://127.0.0.2:5000/random" 来调用随机cookies

2、数据库调用：导入cookies模块，调用get_cookies_from_db()方法来获取随机cookies

Cookies池主要包含六个模块，分别为模拟登录模块、生成器模块、测试器模块、接口模块、存储模块和调度模块：

模拟登录模块：此模块实现了拉勾网与github的模拟登录，可以根据需要添加其它网站，扩展非常方便

生成器模块：调用模拟登录模块实现对各大网站的模拟登录，并保存cookies到数据库

测试器模块：从数据库调用cookies来测试其是否有效，若无效，则重新登录该账号获取cookies

接口模块：使用flask库对存储模块进行封装，提供可通过url访问的接口

存储模块：对redis数据库的增删查改功能进行封装，提供可供其它模块调用的API

调度模块：对生成器、测试器和接口进行合理调度，使代理池能够协调、高效的运行

生成器运行效果：

测试器运行效果：

接口运行效果：

调度后运行效果：