腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

大数据技术架构

纯大数据技术分享，HBase/Kafka/Flink等技术栈，原理与实践，源码分析等。欢迎订阅公众号：大数据技术架构

专栏作者

149

文章

317920

阅读量

95

订阅数

Kafka 面试真题及答案，建议收藏

kafka 消息队列 CMQ 版

Kafka可以说是必知必会的了，首先面试大数据岗位的时候必问kafka，甚至现在java开发岗位也会问到kafka一些消息队列相关的知识点。先来看看有哪些最新的Kafka相关面试点：

大数据技术架构

2020-06-05

2.8K0

干货 | Kafka 内核知识梳理，附思维导图

kafka 消息队列 CMQ 版

前面我们已经分享过几篇Kafka的文章，最近简单梳理了下Kafka内核相关的知识，涵盖了Kafka架构总结，副本机制，控制器，高水位机制，日志或消息存储，消息发送与消费机制等方面知识。文末含对应的Kafka内核思维导图，供参考。

大数据技术架构

2020-05-29

1.4K0

Kafka是如何利用零拷贝提高性能的

kafka 消息队列 CMQ 版

Kafka 在执行消息的写入和读取这么快的原因，其中的一个原因是零拷贝（Zero-copy）技术，下面我们来了解一下这么高效的原因。

大数据技术架构

2020-04-27

1.2K0

小米流式平台架构演进与实践

flink 数据集成大数据 spark 消息队列 CMQ 版

摘要：小米业务线众多，从信息流，电商，广告到金融等覆盖了众多领域，小米流式平台为小米集团各业务提供一体化的流式数据解决方案，主要包括数据采集，数据集成和流式计算三个模块。目前每天数据量达到 1.2 万亿条，实时同步任务 1.5 万，实时计算的数据 1 万亿条。

大数据技术架构

2020-03-11

1.5K0

关于消息队列的优缺点，看这篇就行

apache kafka 消息队列 CMQ 版分布式 rabbitmq

如上图所示，可能存在某一个系统产生关键数据，所有系统都需要其进行提供数据，导致A系统与要提供数据系统产生耦合，系统拓展，其他系统的需求修改都会导致A系统产生修改。

大数据技术架构

2019-09-04

9980

史上最详细Kafka原理总结 | 建议收藏

kafka 消息队列 CMQ 版 zookeeper 数据处理

Kafka是最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx日志、访问日志，消息服务等等，用scala语言编写，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。

大数据技术架构

2019-08-28

2.4K0

细数 MQ 那些不得不说的 8 大好处

消息队列 CMQ 版 kafka

消息队列（MQ）是目前系统架构中主流方式，在大型系统及大数据中广泛采用。对任何架构或应用来说， MQ都是一个至关重要的组件。今天我们就来细数MQ那些不得不说的好处。

大数据技术架构

2019-08-16

3940

你可能不知道的Redis用法

数据结构云数据库 Redis 消息队列 CMQ 版 kafka 编程算法

基于Redis丰富的数据结构，除了充当缓存层来提升查询效率以外，还能应用在很多常见的场景，比如：分布式锁，消息队列，限流等。看到这些场景你可能会有疑问，Redis在这些领域好像并不出名啊，比如消息队列，出名的有Rocketmq、rabbitmq等等，很少听Redis来做这个场景，是不是存在什么问题？是的，下面的文字就来总结下Redis在这些场景的常规用法以及存在的问题。

大数据技术架构

2019-08-16

6300

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态