前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Hadoop离线数据分析平台实战——410事件分析Hadoop离线数据分析平台实战——410事件分析

Hadoop离线数据分析平台实战——410事件分析Hadoop离线数据分析平台实战——410事件分析

作者头像
Albert陈凯
发布2018-04-08 11:53:27
8540
发布2018-04-08 11:53:27
举报
文章被收录于专栏:Albert陈凯Albert陈凯

Hadoop离线数据分析平台实战——410事件分析

项目进度

模块名称

完成情况

用户基本信息分析(MR)�

完成

浏览器信息分析(MR)

完成

地域信息分析(MR)

完成

外链信息分析(MR)

完成

用户浏览深度分析(Hive)

完成

订单分析(Hive)

未完成

事件分析(Hive)

未完成

模块介绍

事件分析我们主要只是分析事件的触发次数, 通过查看事件的触发次数我们可以得到事件转换率或者用户会此类事件的兴趣所在之处以及不喜之处。

计算规则

计算event事件中,计算category和action分组后的记录个数,不涉及到任何的去重操作。 最终数据保存:stats_event。涉及到所有列。 涉及到其他表有dimension_platform、dimension_date、dimension_event。

代码步骤

  1. hive自定义函数定义
  2. hive中创建hbase对应的外部表
  3. hive脚步编写
  4. sqoop脚步编写
  5. 测试

参考:..\代码\transformer\hive\en\statsEvent.hql

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2017.09.03 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • Hadoop离线数据分析平台实战——410事件分析
    • 项目进度
      • 模块介绍
        • 计算规则
          • 代码步骤
          领券
          问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档