前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Flink Forward 2019--Flink相关1--Flink 2.0介绍

Flink Forward 2019--Flink相关1--Flink 2.0介绍

作者头像
阿泽
发布2019-06-21 16:10:53
1.1K0
发布2019-06-21 16:10:53
举报

Towards Flink 2.0: Rethinking the stack and APIs to unify Batch & Stream

Flink currently features different APIs for bounded/batch (DataSet) and streaming (DataStream) programs. And while the DataStream API can handle batch use cases, it is much less efficient in that compared to the DataSet API. The Table API was built as a unified API on top of both, to cover batch and streaming with the same API, and under the hood delegate to either DataSet or DataStream.

Flink目前为绑定/批处理(dataset)和流式(datastream)程序提供不同的API。尽管数据流API可以处理批处理用例,但与数据集API相比,它的效率要低得多。表api构建为一个统一的api,位于两者之上,以覆盖使用相同api的批处理和流式处理,并在hood下委托给数据集或数据流。

In this talk, we present the latest on the Flink community's efforts to rework the APIs and the stack for better unified batch & streaming experience. We will discuss:

- The future roles and interplay of DataSet, DataStream, and Table API

- The new Flink stack and the abstractions on which these APIs will build

- The new unified batch/streaming sources

- How batch and streaming optimizations differ in the runtime, and what the future interplay of batch and streaming execution could look like

在本文中,我们介绍了Flink社区为更好地统一批处理和流式处理体验而重新编写API和堆栈的最新成果。我们将讨论:

-数据集、数据流和表API的未来角色和相互作用

-新的Flink堆栈和这些API将在其上构建的抽象

-新的统一批处理/流媒体源

-批处理和流式优化在运行时有什么不同,以及批处理和流式执行的未来交互可能是什么样子的

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2019-06-10,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Flink实战应用指南 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
批量计算
批量计算(BatchCompute,Batch)是为有大数据计算业务的企业、科研单位等提供高性价比且易用的计算服务。批量计算 Batch 可以根据用户提供的批处理规模,智能地管理作业和调动其所需的最佳资源。有了 Batch 的帮助,您可以将精力集中在如何分析和处理数据结果上。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档