首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
首页标签大数据存储

#大数据存储

在海量大数据分析中,实现计算与存储分离,对存储冷热分层

​etl 读写 elastic 同步数据

威哥

Elasticsearch的部署和使用不在这里介绍,这里主要介绍如何通过etl engine对elastic进行读写访问。

10410

数据开发/数仓工程师上手指南(六)CDM-DWD层搭建规范及流程

fanstuck

前言这次想聊点出工作技术方面外的内容,DWD该层在写CDM层的时候就提及很多次了大差不差,近期让我感悟较多的话那是那句宁愿犯错也不愿意什么都不做,说这句话如果能...

23842

数据开发/数仓工程师上手指南(四)ODS层搭建规范及流程

fanstuck

此系列的前三篇文章已经将整个数据仓库的所有构建逻辑流程讲的十分清晰,等于是我们已经把框架搭建好了,接下来就是填充框架内各个组件层级的内容了。我们已经将数据仓库分...

24610

数据开发/数仓工程师上手指南(三)数仓构建流程

fanstuck

此系列的上篇文章通过拆解电商业务数仓系统,通过数仓分层概念对整个业务进行拆解分层,那么本章节将沿着上一篇的数仓概念分层切割电商业务,去具体构建电商业务的数据仓库...

28610

数据开发/数仓工程师上手指南(二)数仓构建分层概念

fanstuck

在了解了数仓的基本架构之后,我们还需要掌握数仓构建方法,也就是了解数仓是如何建模的,有什么规则和通用方法。我们应该如何去构建一个性能良好、稳定高效、契合业务的数...

27930

Elasticsearch数据存储优化方案

华科云商小徐

优化Elasticsearch数据存储有助于提升系统性能、降低成本、提高数据查询效率以及增强系统的稳定性和可靠性。通常我们再优化Elasticsearch数据存...

14610

Spark框架深度理解一:开发缘由及优缺点

fanstuck

由于Spark框架大多都搭建在Hadoop系统之上,要明白Spark核心运行原理还是得对Hadoop体系有个熟悉的认知。之前有写过从Hadoop1.0到Hado...

54020

【flink番外篇】1、flink的23种常用算子介绍及详细示例(2)- keyby、reduce和Aggregations

一瓢一瓢的饮 alanchan

Flink 示例专栏是 Flink 专栏的辅助说明,一般不会介绍知识点的信息,更多的是提供一个一个可以具体使用的示例。本专栏不再分目录,通过链接即可看出介绍的内...

28510

【flink番外篇】1、flink的23种常用算子介绍及详细示例(1)- map、flatmap和filter

一瓢一瓢的饮 alanchan

Flink 示例专栏是 Flink 专栏的辅助说明,一般不会介绍知识点的信息,更多的是提供一个一个可以具体使用的示例。本专栏不再分目录,通过链接即可看出介绍的内...

75925

【深度】2023年磁带市场迎来“二级存储”的新时代

昆腾Quantum

二级存储旨在通过更经济、更安全的存储介质长期保留相对不关键和不活跃的数据,这些数据不需要像主存储中的数据那样频繁访问。

58110

唯有超大规模存储系统才能满足人工智能的需求

昆腾Quantum

随着世界各国政府努力应对人工智能的深远影响,关于如何规范人工智能的使用以造福社会并防止其滥用的复杂辩论正在升温。“与此同时,人工智能和机器学习工具已经成为我们日...

23230

一文读懂温冷数据存储的技术选型

昆腾Quantum

目前,在对象存储领有很多的使用场景。通常来说,支持AWS的S3协议,就可以把它归类于对象存储。对象存储还有一些特征,比如没有目录数的结构,所以理论上可以存储无限...

39920

磁带存储技术演进简史

昆腾Quantum

磁带首次用于数据存储是在1951年。从90年代IT技术开始普及,出现了更多的磁带技术。但是到2000年,很多磁带技术逐步地淡出市场,LTO成为磁带存储行业的主流...

65620

相关产品

  • 大数据存储

    在海量大数据分析中,实现计算与存储分离,对存储冷热分层

领券