不用代码,10分钟采集58同城二手车数据信息

最近得空把之前的一些案例稍微整理一下,之前做的案例有:

案例1:汽车之家网站奔驰宝马宝马信息采集

案例2:天涯论坛各个板块文章信息采集

案例3:豆瓣电影、读书板块信息数据和评论数据采集

案例4:淘宝茶叶数据采集、竹浆纸数据采集、充电宝数据采集

案例5:京东小米手机数据采集、京东众筹商品数采集

案例6:大众点评泉州美食数据采集、58同城泉州租房信息数据采集

案例7:咪蒙、韩寒、郭敬明微博粉丝及评论采集

案例8:舌尖上的泉州、李叫兽、咪蒙等20个公众号文章、阅读数据采集

之前在简书上对部分内容做了分析,有兴趣都可以去看看简书的文章:

案例1:咪蒙文章特点分析-为什么咪蒙文章那么受欢迎

案例2:京东商城加湿器产品销售分析

案例3:京东众筹成功影响因素分析

案例4:泉州美食、租房情况分析

案例5:淘宝面膜产品分析

案例6:铁观音茶叶市场前景和竞争分析

那么今天就介绍一下如何不用代码,10分钟采集58同城上二手车数据,我们需要的数据包括车型、使用时间、油量、使用里程、价格等维度信息

第一步:创建采集任务

创建采集任务,将要采集的网站URL复制粘贴到输入框中,点击“保存网址”

第二步:提取需要的信息

1、选择需要的采集范围,让需要的信息呈现蓝色,点击鼠标即可选中

2、点击鼠标后,在弹出来的对话框选择“创建一组元素”即可

3、经过2次的范围选择之后,点击创建列表完成,就得到了需要的信息范围,得到如下图:

4、点击循环,即可获得页面的全部信息

第三步:提取目标信息

1、将鼠标移到标题上,待选择的标题变成蓝色后,点击鼠标,得到如下图对话框,选择“抓取这个元素的文本”

2、此时需要的信息出现在右侧的信息框中,如果需要对字段名称修改,点击即可修改。

3、对于需要的其他信息也是按照类似的方法获取,最终:

第四步:设置翻页和AJAX设置

1、将鼠标移到页面底端的翻页处,把鼠标放在“下一页”上,变成蓝色后,即可点击选中:

2、在弹出的对话框中选择“循环点击下一页”即可建立好翻页,可以将后面几页的信息自动选中。

3、然后鼠标选中左边规则中的“点击翻页”,在左边的高级选项中点开下拉页面,在“AJax加载”一项中勾选AJax加载数据,超时2秒。

注:AJAX即延时加载、异步更新的一种脚本技术,通过在后台与服务器进行少量数据交换,可以在不重新加载整个网页的情况下,对网页的某部分进行更新。

表现特征:

1.点击网页中某个选项时,大部分网站的网址不会改变;

2.网页不是完全加载,只是局部进行了数据加载,有所变化

第五步:数据采集及导出

1、Ajax设置完成之后,再重新启动本地采集

2、采集完成后,会跳出提示,选择“导出数据”选择“合适的导出方式”,将采集好的数据导出这里我们选择excel作为导出为格式,数据导出后如下图

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏云市场·精选汇

产品更新——智慧零售V1.3商品+V1.4订单优化上线

选择出库类型,添加商品信息并保存即可。( 出库是减库存操作,出库记录保存后,系统将按照出库单中的商品信息和数量对应更新商品库中的库存信息。)

12330
来自专栏花叔的专栏

多端统一开发框架 Taro 1.0 正式发布

Taro 是一个多端统一开发框架,它支持使用 React 的开发方式来编写可以同时在微信小程序、Web 、React Native 等多个平台上运行的应用,帮助...

25320
来自专栏花叔的专栏

小程序支持跳转网页会带来什么影响

11月2日,iphone X 发售的前一晚,微信小程序发布了一个重量级的更新: 小程序内嵌网页能力开发 使用教程很简单: 到mp.weixin.qq.com登录...

795120
来自专栏罗超频道

记住微信这个特殊功能,关键时刻将派上大用场

前些天,我的iPhone出现了卡顿现象,在使用微信时,总提示存储空间不够,必须清理。去设置里面查了一下,发现微信“吃”掉了大部分存储空间,高达几个GB,而我的手...

53170
来自专栏Android 开发者

Android 8.0 Oreo 国内可用测试平台上线

23720
来自专栏腾讯移动品质中心TMQ的专栏

微信小程序之自动化亲密接触

导读 山雨欲来风满楼,最近微信小程序相关开发文章吹遍大江南北,亦有摧枯拉朽万象更新之势。问小程序形为何物,直教IT众生怡情悦性高潮迭起。作为一名有着远大理想“包...

94590
来自专栏小程序·云开发专栏

《腾讯大家》小程序开发总结

《腾讯大家》是公司推出的中文互联网专栏写作服务产品。由于寻找有效信息的成本是非常大的,一些真正具有传播价值的内容,却往往淹没于信息洪流之中。如何将最有价值的信息...

45630
来自专栏极客慕白的成长之路

在 Windows 上拥有舒适的码字体验

37120
来自专栏全栈工程师成长之路

网站项目开发学习手册

45460
来自专栏用户2442861的专栏

前端工程——基础篇

https://github.com/fouber/blog/issues/10#issuecomment-271133674

11620

扫码关注云+社区

领取腾讯云代金券