python数据处理-txt文件处理入库

一.处理之前数据

二.处理之后存入数据库的数据(后续会进行二次处理,后面更新)

三.初步表结构设计

USE `maoyan`;

DROP TABLE IF Exists `train_courses2`;

CREATE TABLE `train_courses2` (

`id` int(11) NOT NULL AUTO_INCREMENT COMMENT '主键id',

`week_id` varchar(50) DEFAULT NULL COMMENT '培训周id',

`week_course_id` varchar(50) DEFAULT NULL COMMENT '培训周id',

`course` varchar(50) DEFAULT NULL COMMENT '讲师id',

PRIMARY KEY (`id`),

KEY `week_id` (`week_id`),

KEY `week_course_id` (`week_course_id`),

KEY `course` (`course`)

) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='python培训课程表2';

四.主要数据处理代码

五.自动建表入库

六.执行结果

https://github.com/chengcxy/Data_ETL

本文来自企鹅号 - python爬虫学习媒体

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏性能与架构

Mysql DISTINCT的实现思路

DISTINCT实际上和GROUP BY操作非常相似,只不过是在GROUP BY之后的每组中只取出一条记录而已 所以,DISTINCT的实现方式和GROUP B...

3777
来自专栏撸码那些事

MySQL——索引优化实战

上篇文章中介绍了索引的基本内容,这篇文章我们继续介绍索引优化实战。在介绍索引优化实战之前,首先要介绍两个与索引相关的重要概念,这两个概念对于索引优化至关重要。

1432
来自专栏互联网开发者交流社区

SQL触发器实例(上)

1664
来自专栏北京马哥教育

【干货】zabbix报警信息提取 |从数据库入手

zabbix报警信息提取 在日常的监控中,我们除了日常的zabbix操作外,我们有的时候还涉及到与其他公司 进行数据对接。由于别的公司的数据对接很多时候并不是按...

3995
来自专栏pangguoming

oracle的行级触发器使用

行级触发器: 当触发器被触发时,要使用被插入、更新或删除的记录中的列值,有时要使用操作前、后列的值. :NEW 修饰符访问操作完成后列的值 :OLD 修饰符访问...

3345
来自专栏杨建荣的学习笔记

MySQL修改数据类型的问题总结(r10笔记第74天)

昨天快下班的时候,突然开发的同事找我说有个紧急需求,负责这个业务的DBA同事回家了,想让我帮忙看看,运行个SQL语句,几秒钟就好。我一听,就本着人道主义的精神留...

34810
来自专栏PHP在线

MySQL DELETE语句和TRUNCATE TABLE语句的区别

MySQL DELETE语句和TRUNCATE TABLE语句功能相似,但是二者究竟有何区别呢?下文就将为您分析MySQL DELETE语句和TRUNCATE ...

38614
来自专栏Netkiller

数据库安全·用户/角色认证

以下节选择《Netkiller Architect 手札》 地址 http://www.netkiller.cn/architect/ 接下来几周的话题是数据库...

3575
来自专栏数据和云

SQL优化之一则MySQL中的DELETE、UPDATE 子查询的锁机制失效案例

开发与维护人员避免不了与 in/exists、not in/not exists 子查询打交道,接触过的人可能知道 in/exists、not in/not e...

1513
来自专栏java工会

十个mysql语句的优化方法

2066

扫码关注云+社区

领取腾讯云代金券