Hadoop离线数据分析平台实战——320会话分析Hadoop离线数据分析平台实战——320会话分析

Hadoop离线数据分析平台实战——320会话分析

项目进度

模块介绍

会话分析主要同时计算会话个数和会话长度， 主要应用在用户基本信息分析模块和浏览器信息分析模块这两部分。 会话个数就是计算u_sd的唯一个数，长度就是每个会话的长度总和。

计算规则

会话个数指的是计算所有u_sd的个数， 会话长度就是计算每个会话的长度， 然后计算这些长度的一个总值。 (注意：处理的数据为所有事件产生的数据) 最终数据保存：stats_user和stats_device_browser。 涉及到的列(除了维度列和created列外)：sessions, sessions_length。 涉及到其他表有dimension_platform、dimension_date、dimension_browser。

编码步骤

1. 编写mapreduce程序
2. 配置collector类和xml文件等信息。
3. 测试