数字经济正在成为优化企业利益形态、推动国内经济增长的主要动力之一。数字资产是决定未来企业与商业社会发展的关键要素,掌握这一要素的企业必将持续成长、脱颖而出。
在今天这个飞速变化的时代,数据已经成为每个行业成长前进的关键驱动力。为帮助更多组织和个人充分利用数据中蕴含的价值,易观自 2010 年起就开始举办 Analysys10 大会,汇聚全球行业先锋与专家大咖,围绕数据主题分享最佳实践经验与商业发展趋势。
2020 易观 A10 数据智能峰会以“重构”为主题,希望同各个行业的伙伴共同探讨如何以数据能力重构企业竞争力,在快速变化的环境中把握“为用户创造价值”的商业本质,完成从「流量」到「留量」的蜕变。本届峰会共举办 4 天,分别为 10 月 23 日举办的主论坛与金融、大消费论坛,和 10 月 24 日举办的易观数科开发者日;10 月 30 日与 11 月 6 日还将分别在上海和深圳分会场举办行业论坛。
企业重构与数据驱动的未来
在全球企业发展历史上,每隔半个世纪就会迎来一次管理理念的大变革,引发企业架构的全面重构。进入 21 世纪,随着信息技术的极速增长,今天的企业界又一次站在了新的重构浪潮的起点上。
这一次重构趋势的背后,是数据与技术为代表的强大驱动力,拥有并且能够充分驾驭海量数据的企业已经脱颖而出。与此同时,中国市场由于庞大的互联网人口数量形成的网络效益,为中国企业创造了可观的价值潜力,是中国企业崛起与闪耀的最大底气。
贝恩公司资深全球合伙人丁杰认为:
在这样的现实环境中,企业要做战略重构就要聚焦核心主业,同时升级核心技术,充分利用数据价值;重构也将模糊企业边界、挑战传统组织关系。为此,企业应当通过遗传、变异、选择三大要素走好重构之旅:遗传企业核心能力、适应规律进化和变通、选择最有价值的产品与业务。
在战略重构的过程中,企业要专注于用户体验和数据价值的挖掘与培养。易观创始人于揚就从易观自身、蔚来汽车、完美日记、ZOOM 四个案例出发,归纳出了易观在重构大势中采用的一套逻辑:
纷析智库 CEO 宋星也补充了一点,重构并非颠覆式改变,而是在业务、数据角度采取一些新策略。数据时代,运营链路需要抓住诱饵、触点和规则三个核心,通过诱饵吸引消费者,捕捉更多数据触点,连接而成整套规则。
在微观层面,企业的产品和服务每次的版本更新本质上都是一次小规模的重构。在数据化时代,这种微观层面的持续迭代,通过海量数据的推动最终会影响企业战略和商业逻辑。平安金管家总经理沈玮根据平安部署智能数据平台的经历,认为这种重构逻辑的关键在于及时反馈、凭数据赋能,最终做到“人人可迭代,人人可重构”。华润置地的梁冰也介绍了华润利用客户数据评估客户喜好,在持续迭代中提升活动效果的类似经验。
在企业重构的过程中,开源和分享也是所有企业都需要重视的基础性理念。随着越来越多的组织加入开源生态,为生态做出自己的贡献,分享自身的有价值成果,整个生态就会快速成长,繁荣壮大。几位嘉宾都赞同开源分享对于企业重构的重要性,其中用友董波还提到,头部企业应该率先承担起领导开源社区的责任,共享最好的开源技术,向整个社区赋能。
数据化时代,金融与大消费领域的发展趋势展望
在 10 月 23 日下午的大消费论坛上,多位重量级嘉宾就数据化时代“大消费”领域的发展趋势和内在逻辑做了分析与展望。
以先进算法构筑大数据解决方案,由数据驱动精益运营
10 月 24 日是易观 A10 峰会开发者日,来自各行业的技术大咖从技术层面分享了数据驱动的企业重构与精益运营背后的方法与路径,内容干货满满,价值十足。
云原生是当下技术领域的热点趋势,也是大数据应用的理想平台。企业大数据平台向云原生过渡应该做哪些准备?易观 CTO 郭炜提出了几点建议:大数据存储计算分离;云原生独立存储;大数据调度云原生化,最后实现大数据平台本身的云原生。大数据向云原生转型的趋势不可逆转,郭炜也推荐企业及早准备,抢占先机。
算法是大数据分析中的核心技术之一。本届峰会算法大赛的获奖团队,上海新科技技术公司代表吴成章就分享了他们的 OLAP 获奖方案的技术细节。该方案使用了 Clickhouse 开源项目,以优异的成绩在众多参赛队伍中拔得头筹。
积极拥抱开源生态,形成社区良性循环
在当下的技术环境中,任何前沿技术领域都离不开开源社区的推动力量。开源社区贡献了大量高水平的解决方案,也是企业发展到一定程度必须考虑的一个要点。
在开发者日的开源圆桌会议上,Greenplum 姚延栋、Kyligence 李栋、易观郭炜就探讨了企业面对开源生态的最佳应对策略。
一方面,开源本身颇具理想色彩,是技术人员获得行业认可的较好途径。企业通过开源项目可以更好地理解市场需求,提升自身的技术能力。无论从个体还是组织的角度,企业拥抱开源都是迟早的选择。
虽然今天的开源社区遇到了一些国际环境的影响,出现了一些政治化的倾向,但是开源理念的内核精神并未因此改变。国内企业依旧应该秉持开放包容的态度,继续努力拥抱开源生态。与此同时,企业在使用开源项目时也应该注重整个生态的培养,不能一味追求成本节约,应该尊重开源贡献者的付出,这样才能让整个生态进入良性循环。
开源的一个关键要素是契约精神,企业拥抱开源不仅是一种理想主义实践,也是企业践行契约精神的一个途径。开源并不一定等于免费,开源社区也可以发展出商业模式,而这类模式背后的支撑就是所有参与者对契约的认可与尊重。
最后,开源社区的关键依旧是用户,而非开发者自身。开源项目也要注重用户需求、反馈和市场培养,不能成为纯粹的“自我感动”。推广和宣传对于开源组织来说同样重要,类似地,开源项目也应该考虑 KPI 等管理模式。
易观开发者日分享系列
开发者日下午的活动中,易观与 Kyligence、腾讯、滴滴、优路分别分享了各自数据驱动产品的技术细节与实践经验。
易观 Argo 新一代用户行为分析产品
Argo 是易观旗下面向用户行为分析需求的数据处理平台。Argo 提供了运营数据收集、处理和分析的能力,可以一站式完成绝大多数数据分析的需求。如今,Argo 已经发布了 5.1 版本,带来了从 UI 到底层算法的多方面改进。Argo 社区上线一年来,爱好者超过 1500 人,社区会经常举办活动探讨功能改进方向,开源氛围初步形成。
在分享中,易观数科首席架构师江振兴为 Argo 的工程师提出了一些实践使用中的引擎优化建议:首先考虑降低 IO,其次控制内容规模,第三尽量规避集群扩展中遇到的瓶颈,最后对无法解决的瓶颈向用户提供可预期的结果。
接下来的计划中,Argo 准备尽快发布 5.2 版,并举办更多线下交流活动。最后,江振兴也欢迎高水平人才加入 Argo 团队。
Kyligence 云原生转型经验
Kyligence 产品负责人李栋在讲述公司从传统数仓向云原生转型的故事时谈到,云原生转型之路并非一蹴而就,而是长期的持续迭代过程,Kyligence 经过几年的更新进化,才逐渐从传统技术架构过渡到了云原生平台。在此过程中,每一次更新迭代都是需求推动,有可靠的业务逻辑。如今 Kyligence 还在转型过程中,下一步还会从消除数据孤岛、存储优化和 AI 智能化等方面入手继续更新改进。
腾讯看点实时数仓与多维实时分析系统搭建
当业务发展到一定规模,实时数据仓库就成为必不可少的基础服务。而从数据驱动的角度,多维实时数据系统也是非常重要的。但以腾讯看点每天万亿级的数据量而言,要实现数仓的极低延迟实时计算和数据系统亚秒级多维实时查询是很大的挑战。
为此,腾讯基于 OLAP 存储计算引擎开发了多维实时数据分析系统,消费实时绿色数据仓库的数据,实现海量数据高效存储与高性能查询。
腾讯看点工程师王展雄介绍,整套方案中,实时数仓选择了成熟的 Lambda 架构,实时计算引擎选择 Flink,实时存储由 MPP 数据库引擎 Chackpoint 实现。经过多个技术层面的努力,看点团队解决了一系列影响系统效率的瓶颈,最终达成了亚秒级的查询响应能力。王展雄列举了过去 430 分钟的内容数据查询效率:90% 请求耗时 1 秒内,95% 请求耗时 5 秒内,99% 请求耗时 10 秒内。
滴滴 Hive SQL 向 Spark SQL 的迁移实践
由于滴滴原有的 Hive SQL 方案在 App 端的性能和隔离性方面存在劣势,滴滴决定将 Hive SQL 迁移至 Spark SQL。
滴滴杨建丹介绍,迁移方案的三大原则分别是保证数据可用性、用户有收益和迁移过程对用户透明。基于这三个原则,滴滴分步逐渐推进了迁移工作,解决了过程中遇到的很多困难,尤其是针对两种技术的差异做了完善的处理,并将相关经验贡献给了开源社区。最终的迁移成果,一方面任务运行时间大幅缩短,另一方面内存占用显著下降(50% 左右),用户满意度很高。
优路科技的 Dolphin Scheduler 和 Kubernetes 实践
优路科技的李文禾介绍了优路应用 Dolphin Scheduler 和 Kubernetes 的实践经验。Kubernetes 主要解决公司开发过程中部署、维护、滚动升级及高可用的需求,实现自动化运维,同时解决开发、测试、生产环境不一致的问题,使开发人员将重心放在产品研发上。Dolphin Scheduler 则帮助优路统一了各部门的调度系统,提供高可靠、易用性、高扩展能力和丰富的使用场景。在两种工具的帮助下,优路科技更好地推进了快速试错、结果导向的企业策略,加快了企业的产品研发速度,提升了产品多样化水平。
从理念碰撞到实践分享,易观 A10 峰会助力行业数字化成长与进化
数十位大咖云集探讨,创意与实践交织碰撞,本届易观 A10 峰会可谓群星荟萃,精彩不断。两天的会议中,众多嘉宾热情讨论了数据化时代、企业战略重构、数字运营与转型、开源社区发展、金融与大消费市场前景等话题,并分享了多个深度技术主题的内容。
10 月 30 日和 11 月 6 日,易观 A10 峰会还将分别在上海和深圳分会场举办行业峰会活动,继续邀请业内专家探讨行业最佳实践。在风云变幻的 2020 年,易观 A10 峰会的举办是一个乐观的信号,标志着国内产业正在从疫情和经济危机的冲击下逐渐复苏,并在努力为下一个行业大机遇做好准备。随着数据驱动的新产业模式逐渐推广普及,我们有望在不远的将来看到许多行业迎来巨变,为企业和用户开拓全新的旅途。