为了能够实现异步操作获得目标主机的响应头中“Server”字段信息,准备用requests+ThreadPool进行。于是写了两个函数,一个请求,一个负责记录。具体代码片段如下:
def getHead(port,ipss): ddd={}; url='http://'+ipss+':'+port; try: r=requests.get(url); hedd=r.headers; hed=hedd['server']; ddd.update({ipss:hed}) except: pass; return (port,ddd) def heres(port,ddd): diH[port].update(ddd);
传入2个参数PORT和IP,然后记录在字典数据中,
下面是些的ThreadPool的调用:
pl=threadpool.ThreadPool(50); req=threadpool.makeRequests(getHead,ls,heres); [pl.putRequest(rep) for rep in req] pl.wait();
ls=[(port,ip),(port,ip),.......]
如果按照官网的例子是没有问题的,但是数据执行的时候报错。。。。具体报错如下:
Traceback (most recent call last): File "C:\Program Files\Python36\lib\site-packages\threadpool.py", line 158, in run result = request.callable(*request.args, **request.kwds) TypeError: getHead() argument after ** must be a mapping, not str
网上搜了具体报错信息,都没有一点提示,于是没办法,只好去找源码。
结果发现ThreadPool包会对传入数据进行验证,如果传入的是个元组数据(悲催的我传入的元组数据),则元组中第一个元素为请求值,即给请求函数调用的值,第二个元素是结果值,就是请求函数执行后的输出值。
如果第二个元素是其它值,则会报错。而这个“巨坑”官网上竟然没有说明。
在这里我仅自己记录并给广大使用python的ThreadPool 包的人一个提醒吧。太坑了啊!!!!!