专栏首页python小白到大牛动漫迷的福利!Python小白也可以学会的爬虫教程
原创

动漫迷的福利!Python小白也可以学会的爬虫教程

前言

有一段没用 python 了,我也不知道自己为什么对 python 越来越淡,可能自己还是比较喜欢 android ,毕竟自己第一次接触编程就是 android,为了android学java,然后接触的python,这次也是因为android,我要用一次python来帮我爬数据,可能很烂,见谅 Orz

正文

目标网站divinl

首先看看这网站是怎样加载数据的;

打开网站后发现底部有下一页的按钮,ok,爬这个网站就很简单了;

日文的

我们目标是获取每张图片的高清的源地址,并且下载图片到桌面;

先随便打开一张图片看看详细;

emmm,只有一张

你的名字

看起来还挺清晰的,单击新窗口打开图片,还可以

大图

然后下载图片,说实话,这图片很小,我很担心不是高清原图(管他的);

比较小

PS:一定要禁用广告拦截插件,不然加载不出图,我就在这被坑T_T;

禁用过滤广告插件

接着分析我们从何入手

1、先去主页面获取每个图片的详细页面的链接

这链接还是比较好获取的,直接 F12 审核元素,或者右键查看代码,手机上chrome和firefox在url前面加上 "view-source",关于怎么快速学Python,可以加下小编的Python学习qun:699+749+852,不管你是小白还是大牛,小编我都欢迎,不定期分享干货,欢迎初学和进阶中的小伙伴。每天晚上20:00都会开直播给大家分享Python知识和路线方法,qun里会不定期更新最新的教程

链接

2、从详细页面获取图片大图地址

随便打开一个图片详细页面如图:

详细页面

接着按 F12 审核元素,我们需要定位该图片的链接,首先单击左上角的这玩意儿,像一个鼠标的图标:

左上角,一个鼠标的图标

接着只需要单击网页上的图片就能定位到代码了:

代码

3、用大图地址下载该图片

这个很简单,看代码

代码(纯手打,没有一点复制粘贴)

先安装 Requests 和 BeautifulSoup 库

接着在详细网页里获取那个看似高清的图片的不确定是否为真实图片链接并下载(/滑稽)

下载完成

主要代码

完成,贴上所有代码

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 零基础学习python编程不可错过的学习总结,小白福利!

    通过以上可以看到我们写的很贱的程序随便保存了一个.txt结尾的格式,竟然也执行了,并没有按照统一要求的.py格式来设计, 那是不是说明后缀名可以说是任意的呢?理...

    猫咪编程
  • Python分析《我不是药神》豆瓣评论

    看来网上关于 我不是药神 vs 达拉斯 的争论很热啊。关于词频统计就这些,代码中也会完成一些其它的分析任务(其实都是一些很简单的任务,纯练手用),后续会持续更新...

    猫咪编程
  • 3行代码Python搞定图片清晰度识别,原来我们看到的不一定是这样的

    在通常情况下,图片是否清晰是个感性认识,同一个图,有可能你觉得还过得去,而别人会觉得不清晰,缺乏一个统一的标准。然而有一些算法可以去量化图片的清晰度,做到有章可...

    猫咪编程
  • 同源策略与跨域请求

    做前端开发经常会碰到各种跨域问题,通常情况下,前端除了 iframe 、script 、link、img、svg 等有限的标签可以支持跨域外(这也与这些标签的用...

    信安之路
  • DHCP租约到期自动续租问题导致TCP连接异常

    以上是发起请求后有正常收到Ack的情况,但是接下来设备发起了请求并没有收到Ack,所以导致设备一直不断的去发起DHCP请求,而且此时设备并没有网络切换广播,并且...

    大大大大大先生
  • Git使用技巧(三)– 通过GIT提交查询日志

    这样我们会得到所用当前项目中所有git账户提交的日志内容、日期等信息。 同时我们也可以通过某个git账户来查看日志:

    用户2475223
  • 关于如何做一个“优秀网站”的清单——基础篇

    用户1687375
  • 研究生最忌讳的几点是什么?读研期间你该主动做什么?

    我不太喜欢语言啰嗦地写日志,可最近我一直很纳闷,好像不少研究生不知道怎么样做好自己研究生阶段的学习和研究,就此我结合自己的经历谈谈自己的看法,希望能对在读的各位...

    zenRRan
  • 细数研究生和导师的那些恩怨情仇

    这篇文章其实我很早之前就想写了,没想到最近又出了一件类似的事情,事情就发生在我刚毕业不久的学校,事情始末想必大家都已经看过,震惊和惋惜之余,更多的是思考。

    黄小斜
  • 选错导师误终身!Nature大型调查 :1/4博士生想换导师

    当代博士生到底有多苦,学术不好搞、人际不好处、工作不好找、钱就不好挣,逐渐自闭、逐渐抑郁。

    新智元

扫码关注云+社区

领取腾讯云代金券