首页
学习
活动
专区
工具
TVP
发布
您找到你想要的搜索结果了吗?
是的
没有找到

Python 获取网易云音乐热门评论

有很多种语言都可以写爬虫,比如Java,php,python 等,我个人比较喜欢使用python。...不夸张地说,使用不到10行python代码其实就可以写一个小小的爬虫,而使用其他的语言可以要多写很多代码,简洁易懂正是python的巨大的优势。 好了废话不多说,进入今天的正题。...有的时候,我们必须在登录状态下才能得到一些数据,所以我们必须要模拟登录。...本质上来说,通过浏览器登录就是post一些表单信息给服务器(包括用户名,密码等信息),服务器校验之后我们就可以顺利登录了,利用程序也是一样,浏览器post什么数据,我们原样发送就可以了。...关于模拟登录,我后面会专门介绍一下。当然事情有的时候也不会这么顺利,因为有些网站设置了反爬措施,比如如果访问过快,有时候会被封ip(典型的比如豆瓣)。

1.2K70

Python爬取猫眼「碟中谍」全部评论

我们将猫眼上碟中谍的全部评论保存下来,用于后期分析~ 总共评论3W条左右。 逻辑梳理 猫眼PC网页只能查看热门评论,只有在手机端页面才能查看全部评论。...我们用chrome手机模式打开碟中谍6的页面,然后找到了全部评论入口: [glzqq4u9kz.png] 当我们将评论页面向上拖,后台请求中变看到了我们想要的接口地址:http://m.maoyan.com...,所以只能换个思路,将每页最早一条评论的时间作为startTime传入,offset固定15就好了。...*' print 'Author : Awesome_Tang' print 'Date : 2018-09-01' print 'Version: Python2.7...nickName:用户昵称 cityName:城市 content:评论内容 score:用户评分 startTime:评论时间,每次取最早的时间传入下次请求 ''' try

34400
领券