易观 OLAP 大赛揭晓 PingCAP 斩获商业组桂冠

28 日,在 2017 易观 A10 大数据应用峰会上,针对“有序漏斗”难题进行行业攻坚的“2017 易观 OLAP 算法大赛”公布了最终结果。PingCAP 参赛组以超过原始基准测试近 30 倍的成绩,获得了商业组的冠军,并作为优秀案例在大会进行了解题思路分享。

PingCAP 作为本次算法大赛商业组参赛队,借助 TiDB 的算法引擎,展现了强大的复杂 OLAP 处理能力。 作为 PingCAP 的核心产品 TiDB 受 Google/F1 启发,具备强大的水平扩展,强一致性的多副本数据安全,分布式事务,实时 OLAP 等特性。依托这些特性,TiDB 彻底改变以往数据库弹性扩容与事务处理不可兼具的境况,将在线事务处理和在线分析处理融为一体,完美适配大数据背景下各行业的数据存储、计算需求。

作为 TiDB 项目中针对解决用户复杂 OLAP 需求的重要组件,TiSpark 将 Spark SQL 直接运行在 TiDB 存储层上,同时融合 TiKV 分布式集群的优势,并融入大数据社区生态。至此,TiDB 可以通过一套系统,同时支持 OLTP 与 OLAP,免除用户数据同步烦恼。

本次 2017 易观 OLAP 算法大赛以攻坚“有序漏斗”为考题,TiDB 的算法引擎在处理时将性能作为首要目标,运用多种存储布局和索引手段,对数据进行快速扫描和有效过滤,大量使用 SIMD 技术的向量化计算,优化布局,极大减少编解码开销,并根据场景进行智能化存储和 IO 策略。最终以超过原始基准测试近 30 倍的成绩亮眼胜出,获得了专家评审的一致认可。

大数据环境给企业运营带来了新的挑战和机遇,精准捕捉和分析用户行为,以进一步帮助企业的用户增长及留存,成为互联网时代企业产品运营的核心价值。漏斗转化是帮助企业更快、更好的了解在哪一环节提升运营,实现精细化运营的重要手段。行业内已将实现“漏斗”升级作为当前数据应用领域的重要议题。其中,相较用户路径重合率极低的“无序漏斗”,“有序漏斗”的数据研究更有价值。

此次 PingCAP 作为商业组冠军提交的优异成绩,为业内攻坚“有序漏斗”计算效率的技术瓶颈提供了突破口。在会上,PingCAP 联合创始人兼 CEO 刘奇还进行了解题思路详解。他表示,在数据驱动的今天,通过对数据的分析,快速挖掘潜在的用户需求与市场机遇,这其中,高效是关键。TiDB 融合了 OLTP 与 OLAP 能力,将数据价值最大化,通过技术创新研发,为市场提供更好的技术解决方案,希望能够降低实时数据分析行业的门槛。

作为世界级分布式 HTAP 数据库厂商,PingCAP 的代表作 TiDB 现已发版至 1.0 GA 版。准生产测试用户 400 余家,其中摩拜单车、同程旅游、360 金融、游族网络,盖娅互娱、猿辅导,去哪儿等数十家不同行业的领先企业已经应用在实际生产环境,涉及互联网、游戏、金融、政府、电信、制造业等多个领域,帮助企业解决了海量数据存储、超大规模并发访问及交易问题。同时与腾讯云、UCloud 等国内外多家主流的大型公有云厂商深度集成,提供公有云数据库服务。

原创声明,本文系作者授权云+社区-专栏发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

编辑于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏云计算D1net

印度担忧Aadhar计划 Mongo DB跟着引争议

1.受棱镜门影响,各界对Aadhar的质疑从是否将威胁人民隐私与安全,转而聚焦在 Aadhar 搜集、储存以及处理资料的方法,以及美国新创公司 MongoDB...

3875
来自专栏CSDN技术头条

专访天数科技创始人兼CEO李云鹏:充分尊重工程师的个性差异

李云鹏,天数科技创始人兼CEO;曾任美国甲骨文公司全球研发总监,从事甲骨文数据库10g至12c的研发工作。日前,笔者采访了李云鹏,请他分享国内外数据库发展的差异...

1907
来自专栏编程一生

你们项目的核心战略是什么

不管干什么,设定一个目标,针对一个目标有一个核心战略,并坚决的执行核心战略是取得胜利的不二法宝。

651
来自专栏灯塔大数据

数据的阴暗面:什么是暗数据?为什么暗数据很重要?

? 最近引起热议的术语暗数据,确切的说,就是来自于大数据的阴暗面。尽管暗数据这个名字听起来不吉利(让人联想到一个少年哥特乐队会取的绰号),但是或许更加的准确。...

3105
来自专栏腾讯技术工程官方号的专栏

人类全基因组分析提速10倍的背后:TCS 服务垂直行业的探索

近日腾讯云国内首发二代基因测序 FPGA 加速方案,将人类全基因组数据分析从业内平均水平的30小时降低到了不到3小时。

2859
来自专栏海云捷迅的专栏

打造媒体云平台,助力金融时报云化落地

为了更好地应对信息化对媒体行业带来的冲击,并抓住云化变革所带来的新机遇,金融时报与海云捷迅一起,打造出超融合一体化云平台项目,为报社及全媒体新闻生产业务提供了有...

2430
来自专栏大数据文摘

余额宝的小算盘:马云肥水不流外人田

19312
来自专栏SAP最佳业务实践

从SAP最佳业务实践看企业管理(34)-SD-提前期

销售业务特点是很灵活,产品的特点不同,销售模式也不同,有的是以批发零售为主,有的以直接销售为主,还有的是卖服务,方案销售为主。 如果你是卖水的,那一定要把产品生...

3074
来自专栏DevOps时代的专栏

京东618的秘密 | 全球最大规模 Kubernetes 生产集群运营实践

1175
来自专栏华章科技

揭秘:亚马逊鲜为人知的10大物流技术

亚马逊2012年7.75亿美金收购的Kiva Systems,大大提升了亚马逊的物流系统。据悉时至2015年亚马逊已经将机器人数量增至10000台,用于北美的各...

963

扫码关注云+社区