前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Hadoop离线数据分析平台实战——330会话分析Hourly分析Hadoop离线数据分析平台实战——330会话分析Hourly分析

Hadoop离线数据分析平台实战——330会话分析Hourly分析Hadoop离线数据分析平台实战——330会话分析Hourly分析

作者头像
Albert陈凯
发布2018-04-08 11:41:55
8610
发布2018-04-08 11:41:55
举报
文章被收录于专栏:Albert陈凯

Hadoop离线数据分析平台实战——330会话分析Hourly分析

项目进度

模块名称

完成情况

用户基本信息分析(MR)�

未完成

浏览器信息分析(MR)

未完成

地域信息分析(MR)

未完成

外链信息分析(MR)

未完成

用户浏览深度分析(Hive)

未完成

订单分析(Hive)

未完成

事件分析(Hive)

未完成

模块介绍

Hourly分析指的是按照小时分析数据, 在本次项目中,只分析活跃用户、会话个数以及会话长度这三个指标的数据。 我们通过修改现有的job来达到完成hourly分析数据统计的目标。 分别通过在active user和sessions这两个job中添加数据可以达到我们的分析要求。

计算规则

hourly分析分为hourly active user分析、hourly sessions分析以及hourly sessions length分析, 分别计算各个小时的活跃用户、会话个数以及会话长度来进行展示操作。 最终数据保存:stats_hourly表中,每个小时的数据保存到对应列中。 涉及到其他表有dimension_platform、dimension_date、dimension_kpi。

编码步骤

  1. 修改Active user的mapreduce代码,添加统计hourly active user的代码。
  2. 修改Sessions的mr代码,添加统计hourly Sessions和hourly sessions length的代码。
  3. 测试
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2017.09.03 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • Hadoop离线数据分析平台实战——330会话分析Hourly分析
    • 项目进度
      • 模块介绍
        • 计算规则
          • 编码步骤
          领券
          问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档