大家好,今天完成对IPProxyPool较大范围地更新,主要是根据大家的需求反馈进行的调整。下面说一下更新的主要内容:
1.更新评分机制。
2.用户可以自定义检测函数,在config.py的CHECK_PROXY变量中可以配置。
3.经过大家的共同努力,彻底解决了僵死进程的问题。
由于IPProxyPool项目是通过多进程+协程的方式对代理ip进行抓取和验证的,因此容易出现开启进程较多无法及时销毁的现象,即僵尸进程。经过大家的努力,最终将这个问题进行彻底地解决了,谢谢大家的支持。
下一篇博文,咱们就开始讲解我的另一个开源项目PowerProxy,希望大家多多支持。