首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

python取好友的全民K

无意中打开了全民k发现好友都挺喜欢唱歌的,就没事的点开了几个好友的,朋友们唱的都挺好的,越听越想听。但是每次都得点开别人的主页听歌,难免有些尴尬。...“要是可以将这些拉到本地多好啊…………” 有了这样的一个念头,说干就干……………… 1.分析网页 都知道哈,要想取某一个网站的数据,第一步并不是写代码。...而是需要通过浏览器、抓包工具啥的对目标网页进行分析,全民k也是一样 1.1登陆全民k 全民k的主页长这个样子 [1.png] 可以看到啥也没有啊,咋办呢?...2.2歌曲信息的url 在上面的查看网页源代码的过程中,我们可以发现,具体到哪一首的链接是嵌入在网页的源代码中的,但是在主页上所展示的信息并不是完整的,仅仅是展示了一小部分而已。..."start": "1", # 起始的页数 "num": "15", # 每一次访问多少的数据 "share_uid": "639e9f8d2629378e3d", # 更换为需要取好友的

1.1K30

python取好友的全民K

无意中打开了全民k发现好友都挺喜欢唱歌的,就没事的点开了几个好友的,朋友们唱的都挺好的,越听越想听。但是每次都得点开别人的主页听歌,难免有些尴尬。...“要是可以将这些拉到本地多好啊…………” 有了这样的一个念头,说干就干……………… 1.分析网页 都知道哈,要想取某一个网站的数据,第一步并不是写代码。...而是需要通过浏览器、抓包工具啥的对目标网页进行分析,全民k也是一样 1.1登陆全民k 全民k的主页长这个样子 可以看到啥也没有啊,咋办呢?一头雾水,啥也不说了,先打开好友的主页看一下。...2.2歌曲信息的url 在上面的查看网页源代码的过程中,我们可以发现,具体到哪一首的链接是嵌入在网页的源代码中的,但是在主页上所展示的信息并不是完整的,仅仅是展示了一小部分而已。...", # 起始的页数 "num": "15", # 每一次访问多少的数据 "share_uid": "639e9f8d2629378e3d", # 更换为需要取好友的

1.2K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    人生几何,何不Python

    学习Python也有一段时间了,学到了很多,从什么也不懂到入门,现在谈谈python怎么入门。 注意:本文没什么逻辑,纯属个人对学习历程的回顾。...第三其实讲真之前对于python我是不怎么了解的,只是看了知乎和blog感觉用Python爬虫挺好玩,才决定学python的。...python语言之时,内心的困惑和挣扎(其实python相对来说比较简单了);按照我的学习周期及其效果来看,我的学习效果得到了自己对自己的检验; 我的python学习是在大学期间就开始的,而非是在职场的强压下被逼无奈之下开始的...或者是纯粹只是为了兴趣、实现自己的某些想法,比如时不时个妹子图....等等。...其实正则表达式不是Python独有的,它在其他编程语言中也可以使用,但是Python的re库提供了整个正则表达式的实现,利用re库我们就可以在Python中使用正则表达式来,在Python中写正则表达式几乎都是用的这个库

    73640

    为了知道胡粉丝的男女比率,了三百万微博数据

    所以我有个想法,把胡微博上六千万粉丝数据取下来,看看到底男粉丝多还是女粉丝多。 大家可以在自己心中猜测一个答案,到底男粉多还是女粉多呢~~。我的答案是男性比较多。 分析问题 ?...采集胡所有微博 2. 采集每条微博的三类数据(转发、评论、点赞) 3. 数据清洗 好了,现在已经非常清晰了,下面就开始去寻找取方法。..., following: false, follow_me: false } }, } 微博官方API同样提供相应数据 ,建议使用前仔细阅读 接口访问频次权限 爬虫代码 爬虫完整代码可以去我的公众号(Python...爬虫语言是Python3,使用Scrapy框架,数据保存在mongo,没有使用分布式,单机3天跑完。 因为微博的反,需要大量代理支撑。...我拿胡与其他小鲜肉作对比,肯定会跟欣赏胡。你说呢? 本文并不是为了证明什么,只是作为一名普通粉丝想去看看更多东西。其实本次数据取有很多地方需要优化,大家不用太过当真。

    1.9K20

    python爬虫反反:搞定CSS反加密

    0 惯性嘚瑟 刚开始搞爬虫的时候听到有人说爬虫是一场攻坚战,听的时候也没感觉到特别,但是经过了一段时间的练习之后,深以为然,每个网站不一样,每次取都是重新开始,所以,之前谁都不敢说会有什么结果。...笔者在阅读完这些文章之后,自信心瞬间爆棚,有如此多的老师,还有不了的网站,于是,笔者信誓旦旦的开始了大众点评之旅,结果,一上手就被收拾了,各个大佬们给出的爬虫方案中竟然有手动构建对照表的过程,拜托,.../usr/bin/env python import requests from lxml import etree header = {"Accept":"application/json,...大众点评就是众多带反的网站中的佼佼者,使用了比较高级的反手法,他们把页面上的关键数字隐藏了起来,增加了爬虫难度,不信~你看: ?.../usr/bin/env python # _*_ UTF-8 _*_ from fontTools.ttLib import TTFont import matplotlib.pyplot as plt

    1.1K20
    领券