proxy_pool readme里面的爬虫例子不恰当,建议修改

oaxa6hgo  于 5个月前  发布在  其他
关注(0)|答案(1)|浏览(52)

readme里面的爬虫例子,get请求的网址是一个https协议的网站 ( https://www.example.com ), proxies参数里代理的却是http协议,这样子测试的根本就是直连而不是代理......

建议测试的网址改成 http://httpbin.org/iphttps://httpbin.org/ip

proxies参数改成: { "http" : proxy, "https" : proxy }

nzkunb0c

nzkunb0c1#

粗略看了一下你的代码,你好像只验证了HTTP网站的访问情况而没有验证HTTPS网站?至少 validUsefulProxy 函数验证的时候,只验证了HTTP的情况

相关问题