首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

将爬取的数据保存到MySQL 数据库

今天情人节,祝福大家情人节快乐!但是还是得要学习的,今天将爬取的数据保存到数据库里。

网站的分析我们已经分析过了,今天直接粘贴代码分析。

文件

这部分和原来分析的还是一样的,因为我们只是换个存储的机制,对于网站的爬取没有影响。

文件夹下的

定义需要格式化处理的字段(需要保存到数据库里的字段):

执行具体的插入的方法:

定义一个类方法,得到中的数据库配置信息,得到数据库连接池。

中会得到连接池

方法是默认调用的,进行数据库操作。

错误处理方法,处理异步插入的异常

执行具体的插入,根据不同的构建不同的语句并插入到中

连接到配置文件中的数据库名。

在MySQL中建表抓取完的数据

  • 发表于:
  • 原文链接http://kuaibao.qq.com/s/20180214G11AG000?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券