如何去高大上的下载电影天堂的内容

简介

找过电影资源的人肯定都知道电影天堂这个网站,只要复制上面的链接就可以下载对应的电影。但是一个一个链接点,太麻烦了,如何去批量做,这个时候就要用到爬虫了

操作

首先下载爬虫 git clone https://github.com/FWC1994/Python-Crawler.git cd Python-Crawler

如果你要长时间把爬虫放在后台运行,你可以使用screen这个命令 sudo apt install screen 之后执行 screen -S spider 就可以打开一个会话 之后执行 python Crawl.py 爬虫启动成功,然后按CTRL+A+D退出这个终端,如果要重新进入这个会话可以输入 screen -r进入 详细的你可以看screen这个命令到底是怎么使用的

爬虫爬取到的链接会以文本文件的形式存储在当前目录下,打开你会发现每个文件夹下有很多文件,每个文件几乎就只有一个链接,你要下载一部电影还是要打开一个一个文件复制里面的链接然后再下载,这样的话还是很麻烦。

没事linux是万能的,你可以输入 cat ./*.txt | tee /home/bboysoul/a.txt 这样,当前文件夹中的所有链接都保存在了a.txt文件中。

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏破晓之歌

jupyter、pyenv、virtualenv、virtualenvwrapper简要区别

在创建一个新的python版本时,完全拷贝一个现成的python环境。新的python版本,可作为global

12240
来自专栏欧科云

善用本地组策略编辑器,解决各种问题

12910
来自专栏debugeeker的专栏

基于现有的Linux LiveCD加入自己的内核和ramfs

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/xuzhina/article/detai...

8810
来自专栏运维小白

Linux启动顺序

linux启动顺序: 1)开机BIOS自检     2) MBR引导     3)grub引导菜单     4)加载内核kernel      5) ...

24280
来自专栏技术记录

centOS7 mini配置linux服务器(四) 配置jdk

这里简单写一下centos7Mini  安装jdk1.8的全过程。 一、下载jdk,linux版本。 地址:http://www.oracle.com/tech...

27980
来自专栏小怪聊职场

Jenkins+Git+Maven+Tomcat8配置web自动构建环境(拉代码、编译、打包、部署)

28140
来自专栏分布式系统进阶

编译GCC 7.1.0

其中 --disable-multilib这个是交叉编译功能, 比如希望在64位系统下也能编译出32位的程序 最后会将gcc安装到 /usr/local/bi...

19220
来自专栏运维咖啡吧

LDAP落地实战(三):GitLab集成OpenLDAP认证

当重启完成后登陆报:Could not authenticate you from Ldapmain because "Invalid credentials"...

35520
来自专栏空木白博客

分享5个网址二维码API接口

它们只需要填写好网址就能自动生成二维码,分别来自与bshare和jiathis分享工具中,如您需要就把下面的二维码生成API接口复制到你需要地方。

51720
来自专栏软件工程师成长笔记

CentOS7安装OracleJDK和JRE

JDK(Java Development Kit)指的是Java开发工具集。JDK是整个Java的核心,包括了Java基础类库、Java运行环境(JRE)和Ja...

47930

扫码关注云+社区

领取腾讯云代金券