实时计算

LV0
发表了文章

快速构建第一个Flink工程

在安装好Flink以后,只要快速构建Flink工程,并完成相关代码开发,就可以轻松入手Flink。

实时计算
大数据GradleAndroidMavenEclipse
发表了文章

Kafka入门宝典(详细截图版)

准备三台虚拟机,分别是node01,node02,node03,并且修改hosts文件如下:

实时计算
KafkaNode.jsZooKeeperScalaApache
发表了文章

统一批处理流处理——Flink批流一体实现原理

无限流处理:输入数据没有尽头;数据处理从当前或者过去的某一个时间 点开始,持续不停地进行

实时计算
APIWindowssparkMapReduce数据处理
发表了文章

Flink,Storm,SparkStreaming性能对比

该应用程序从 Kafka 消费广告曝光消息,从 Redis 查找每个广告对应的广 告宣传活动,并按照广告宣传活动分组,以 10 秒为窗口计算广告浏览量。 10 ...

实时计算
大数据KafkaRedis测试服务 WeTest
发表了文章

最简单流处理引擎——Kafka Streams简介

Storm,Spark Streaming,Flink流处理的三驾马车各有各的优势.

实时计算
KafkasparkApache数据处理ZooKeeper
发表了文章

超越Storm,SparkStreaming——Flink如何实现有状态的计算

Storm需要自己实现有状态的计算,比如借助于自定义的内存变量或者redis等系统,保证低延迟的情况下自己去判断实现有状态的计算,但是Flink就不需要这样,而...

实时计算
大数据
发表了文章

替代Flume——Kafka Connect简介

我们看到Kafka最新的定义是:Apache Kafka® is a distributed streaming platform

实时计算
Kafka分布式APIHTTP
发表了文章

可以穿梭时空的实时计算框架——Flink对时间的处理

在Streaming-大数据的未来一文中我们知道,对于流式处理最重要的两件事,正确性,时间推理工具。而Flink对两者都有非常好的支持。

实时计算
UnixWindows编程算法大数据Kafka
发表了文章

数据架构的未来——浅谈流处理架构

​ 业务数据系统存储事务性数据,比如SQL, NOSQL数据库,这种数据拥有准确的数据,比如用户业务,支付业务等体系都可以这样实现,这类需要经常更新,是整体业务...

实时计算
编程算法数据库架构设计大数据微服务
发表了文章

Flink快速入门--安装与示例运行

首先要想运行Flink,我们需要下载并解压Flink的二进制包,下载地址如下:https://flink.apache.org/downloads.html

实时计算
大数据UnixHadoopScalaHTTP
发表了文章

Kafka到底有几个Offset?——Kafka核心之偏移量机制

​ Kakfa的Offset机制是其最核心机制之一,由于API对于部分功能的实现,我们有时并没有手动去设置Offset,那么Kafka到底有几个Offset呢?

实时计算
Kafka
发表了文章

Kafka监控工具汇总

首先介绍kafka的监控原理,第三方工具也是通过这些来进行监控的,我们也可以自己去是实现监控,官网关于监控的文档地址如下:

实时计算
GitHubGitKafkahttpsHTTP
发表了文章

实时计算大数据处理的基石-Google Dataflow

​ 此文选自Google大神Tyler Akidau的另一篇文章:Streaming 102: The world beyond batch

实时计算
Windows数据处理
发表了文章

Streaming-大数据的未来

分享一篇关于实时流式计算的经典文章,这篇文章名为Streaming 101: The world beyond batch

实时计算
Windows数据处理批量计算云计算
发表了文章

Kafka 2.3 Producer (0.9以后版本适用)

kafka0.9版本以后用java重新编写了producer,废除了原来scala编写的版本。

实时计算
Kafka

个人简介

个人成就

  • 获得 128 次赞同
  • 文章被阅读 3.9K 次

扫码关注云+社区

领取腾讯云代金券