腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

大道七哥

专栏作者

131

文章

266139

阅读量

31

订阅数

Flink 学习 — 自定义 Data Sink

flink 大数据云数据库 SQL Server 数据库 sql

前篇文章《Flink学习》—— Data Sink 介绍介绍了 Flink Data Sink，也介绍了 Flink 自带的 Sink，那么如何自定义自己的 Sink 呢？这篇文章将写一个 demo 教大家将从 Kafka Source 的数据 Sink 到 MySQL 中去。

2021-06-21

5630

Hadoop（十二）MapReduce概述

大数据 mapreduce hadoop 网站

　　前面以前把关于HDFS集群的所有知识给讲解完了，接下来给大家分享的是MapReduce这个Hadoop的并行计算框架。

2019-09-10

8030

Hadoop（十）Hadoop IO之数据完整性

大数据数据结构 hadoop 存储

　　上一篇我分享了Hadoop的压缩和编解码器，在我们开发的过程中其实是经常会用到的，所以一定要去掌握。这一篇给大家介绍的是Hadoop的数据完整性！

2019-09-10

6440

Hadoop（八）Java程序访问HDFS集群中数据块与查看文件系统

大数据 node.js java 存储文件存储

　　我们知道HDFS集群中，所有的文件都是存放在DN的数据块中的。那我们该怎么去查看数据块的相关属性的呢？这就是我今天分享的内容了

2019-09-10

6630

Hadoop（七）HDFS容错机制详解

　　HDFS（Hadoop Distributed File System）是一个分布式文件系统。它具有高容错性并提供了高吞吐量的数据访问，非常适合大规模数据集上的应用，它提供了一个高度容错性和高吞吐量的海量数据存储解决方案。

2019-09-10

8780

Hadoop（六）之HDFS的存储原理（运行原理）

node.js 大数据存储编程算法

　　其实说到HDFS的存储原理，无非就是读操作和写操作，那接下来我们详细的看一下HDFS是怎么实现读写操作的！

2019-09-10

6810

Hadoop（五）搭建Hadoop客户端与Java访问HDFS集群

hadoop java 文件存储大数据 xml

　　注意：这里要说明一下-cp，我们可以从本地文件拷贝到集群，集群拷贝到本地，集群拷贝到集群。

2019-09-10

2.1K0

Hadoop（二）搭建伪分布式集群

hadoop xml 分布式 yarn 大数据

　　前面只是大概介绍了一下Hadoop，现在就开始搭建集群了。我们下尝试一下搭建一个最简单的集群。之后为什么要这样搭建会慢慢的分享，先要看一下效果吧！

2019-09-10

8580

Hadoop（一）之初识大数据与Hadoop

hadoop 数据库 sql 大数据数据处理

　　从今天起，我将一步一步的分享大数据相关的知识，其实很多程序员感觉大数据很难学，其实并不是你想象的这样，只要自己想学，还有什么难得呢？

2019-09-10

4960

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态