Python数据采集与可视化

一、知识目录：

任务一：Python编程语言基础（视频）

1. Python环境安装：Anaconda

2. Python编程工具：Jupyter notebook

3. Python数据类型：字符串、数值、布尔、列表、字典介绍

4. Python控制语句：if条件语句、for 循环、while循环

5. 函数的定义和模块

任务二：如何快速采集网络数据？（直播）

1. 网络爬虫的原理和基本流程你不一定真的懂

3. requests库基本方法和你不知道小技巧

4. Xpath到底能干什么

5. 实战案例：豆瓣电影短评数据抓取有思路不一定会部署

任务三：Pandas Vs Excel数据清洗和分析 （直播）

1. 电影短评数据结构解析

2. 数据集预处理

3. 对短评数据集进行探索性分析

4. 如何使用python做中文分词？

任务四：如何制作数据可视化大屏？（直播）

1. 绘图的基本步骤

2. Pyecharts数据可视化原理及使用

3. Python制作：饼图、面积图、条形图、数据地图、词云图

4. 使用pyecharts制作一张可视化大屏

通过学习，你将能够掌握基于Python语言和工具库如何完成一个简要的数据分析任务，轻松做出交互式动态数据分析内容，用数据分析评价数据。

二、案例展示

1. 豆瓣短评网络数据抓取程序

2. 我是余欢水 豆瓣短评评分分布和时间走势图

3. 我是余欢水 豆瓣评论用户城市分布

4. 我是余欢水 豆瓣评论文本情感分析与可视化解读

三、上课环境/课前准备

上课环境

本次上课使用anaconda3+jupyter notebook

课前准备

Python基本的编程知识，没有基础的同学在学习爬虫部分需要将预习部分《Python编程基础》预习完毕。