首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Hudi Timeline(时间轴)分析

    介绍 Hudi维护着一条对Hudi数据集所有操作的不同 Instant组成的 Timeline(时间轴),通过时间轴,用户可以轻易的进行增量查询或基于某个历史时间点的查询,这也是Hudi对外提供基于时间点查询的核心能力之一...在发生灾难需要恢复数据的情况下,它有助于将数据集还原到时间轴上的某个点。 compaction :将基于行的log日志文件转变成列式parquet数据文件。...compaction在时间轴上表现为特殊提交。 restore:将从某个 savepoint恢复。 Timeline与 Instant密切相关,每条 Timeline必须包含零或多个 Instant。...总结 Timeline(时间轴)是Hudi中非常重要的概念,基于历史时间点的查询及增量查询均需由 Timeline提供支持,因此了解 Timeline对于理解Hudi支持何种查询非常有用。

    3.7K20
    领券