还在为pip安装发愁？whl自助脚本问世！
还在为pip安装发愁？whl自助脚本问世！
公众号guangcity
发布于 2019-09-20 15:28:52
发布于 2019-09-20 15:28:52
还在为pip安装发愁？whl自助脚本问世！
0.导语
在学习Python的过程中，大家肯定会遇到pip安装失败的问题，要么是因为网速问题，要么是因为win系统上与vs绑定，必须要装vs等一些系列问题，而这些问题有个很关键的解决办法，那就是直接下载相应的whl包来安装。
所以，我就想到，如果有一个能够支持搜索查找及下载whl包的脚本，那是不是很棒哦，果不其然，可以做到，让我时刻想到需求来源于生活，技术用于提升工作效率！
昨日花了一会时间写下这个脚本，并做了测试，今天来总结一下，欢迎大家star,fork,转发，收藏本篇文章！
源码地址(或者点击阅读原文)：
https://github.com/Light-City/AutoDownloadWhl
本次脚本我将它命名为：Whl自助搜索下载器
实现了如下功能：
- 支持检索
- 支持查找
- 支持下载
- 单、多文件下载
2.如何使用及功能演示
2.1 如何使用
运行脚本需要：
- requests、lxml、os库
- curl或axel命令
win系统的直接下载win版本的按照网上配置即可！
linux系统与mac系统可用yum 或 apt 或 brew等来进行安装！
复制源码地址并下载脚本，运行脚本即可：
python AutoDownloadWhl.py
2.2 功能演示
- 所有包信息展示
- 适应平台whl包
- 多包下载
完整演示如下：
3.代码详解
3.1 封装
封装包地址与下载地址：
class AutoDownWhl():
def __init__(self):
# 包地址
self.url = 'https://www.lfd.uci.edu/~gohlke/pythonlibs/'
# 下载地址
self.base_url = 'https://download.lfd.uci.edu/pythonlibs/r5uhg2lo/'
# 模拟浏览器
self.headers = {
'User-Agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.96 Safari/537.36'
}
3.2 获取选择器与包名
解析源码与获取包名：
# 获取选择器与包名
def getLib(self):
raw_text = requests.get(self.url, headers=self.headers).content
seletor = etree.HTML(raw_text)
lib_names = seletor.xpath('//ul[@class="pylibs"]//li//strong//text()')
return seletor, lib_names
3.3 输出所有包名
一行15个包名打印：
# 输出所有包名
def print_AllLib(self, lib_names):
print('\n------------------共查找到' + str(len(lib_names)) + '个包------------------\n')
for i in range(len(lib_names)):
if i and i % 15 == 0:
print('\n')
print(lib_names[i], end=' ')
3.4 搜索与下载
只摘取了核心代码，下载采用调用系统命令curl与axel，请在自己的系统上安装这两个其中之一下载！
def searchDown(self, downloadMethod='axel'):
# 此部分代码只摘取核心部分
if int(lib_sequence) <= max:
detail_name = detail_libs[int(lib_sequence) - 1].strip().replace('‑', '-')
download_url = self.base_url + detail_name
print('\n\n输入包名正确,下载地址：' + download_url + '\n')
print("---------------------------------------开始下载---------------------------------------\n")
if downloadMethod == 'curl':
cmd = 'curl -O %s' % download_url
else:
cmd = 'axel %s' % download_url
while True:
cmd_res = os.system(cmd)
if cmd_res == 0:
print('下载成功!\n')
break
else:
print('下载失败!\n')
is_try = input('是否重试下载(y|n)： ')
if is_try == 'y' or is_try == 'Y':
continue
else:
break
else:
print("\n \033[1;31m 输入序号不符合要求,请重新输入！ \033[0m \n")
3.5 调用
采用axel下载：
dw = AutoDownWhl()
dw.searchDown(downloadMethod='axel')
本文参与 腾讯云自媒体分享计划，分享自微信公众号。
原始发表：2019-02-15，如有侵权请联系 cloudcommunity@tencent.com 删除
评论
登录后参与评论
推荐阅读