干货满满,腾讯云+社区技术沙龙 Kafka Meetup 深圳站圆满结束

云+导语:4月22日,由腾讯云和 Kafka 社区主办、开源中国协办的腾讯云+社区技术沙龙 Kafka Meetup 深圳站在腾讯大厦举行,本次活动全程干货满满,不仅有 Kafka 的前世今生及展望,也有对 Kafka 技术架构的深入解析,同时还有基于 Kafka 的应用平台的相关开发与运维实践。活动异常火爆,现场近三百人参与交流,不少参会者表示活动质量很高,不虚此行。

现场听众

Apache Kafka 的过去、现在和未来

2010年,LinkedIn 着手开发 Kafka,到2011年 Kafka 进入 Apache 孵化器,成为世界顶级开源项目,并迅速被各种企业采用。据分析,目前已经有超过70%的世界500强公司在使用 Kafka。Kafka 主要作者、项目委员会主席及 Confluent 联合创始人饶军首先为大家带来了《Apache Kafka 的过去、现在和未来》的分享,介绍了 Kafka 这一路的各个关键节点及展望。他认为“Kafka 未来不仅仅是一个实时数据收集和传输系统,随着接下来的发展,它更偏向于成为一个实时数据流处理、交换和共享的平台。”

饶军:Apache Kafka 的过去、现在和未来

Kafka 集群自动化运营实践

腾讯基础架构部高级工程师杨原分享了《Kafka 集群自动化运营实践》,他介绍了腾讯云 CKafka 系统在自动化运营时,需要面对的大规模 Kafka 集群故障节点移除、新节点加入、节点间数据倾斜、用户所需 Kafka 实例动态升降配与 Borker 资源利用率不均衡等问题,同时也给出了腾讯的相应解决方案。

杨原:Kafka 集群自动化运营实践

知乎基于 Kubernetes 的 Kafka 平台的设计和实现

下一位分享嘉宾白瑜庆是来自知乎技术中台的负责人,他带来的是《知乎基于 Kubernetes 的 Kafka 平台的设计和实现》,分享了 Kafka 在知乎的应用,以及为何要基于 K8S 做 Kafka 平台,具体是如何去做这样一个平台的。据白瑜庆介绍,知乎在日志、数据传输与消息队列服务中应用了 Kafka,Kafka 已成了知乎技术平台中的重要组件,目前已经平稳运行了2年。

白瑜庆:知乎基于 Kubernetes 的 Kafka 平台的设计和实现

随后茶歇环节,参会者围绕着分享嘉宾纷纷提问,现场气氛活跃,技术氛围浓厚。

茶歇提问

CKafka 在人脸识别 PaaS 中的应用

回到下半场分享,首先是格灵深瞳深瞳云数据流研发负责人陈新宇带来《CKafka 在人脸识别 PaaS 中的应用》。格灵深瞳的大规模图片人脸识别服务使用了经过腾讯云优化的 CKafka,应用在业务数据导入、缓存、输出以及监控与日志收集等各个环节,连接了各个数据处理模块,为实时的人脸特征提取、比对及分析提供了保障,是图片流实时人脸识别平台的核心。陈新宇从应用层面介绍了 Kafka 在深度学习人脸识别平台架构中的位置及重要性,并介绍了一些 connect 等 Kafka 生态组件的应用与遇到的问题。

陈新宇:CKafka 在人脸识别 PaaS 中的应用

Kafka 高性能解密及优化

最后腾讯云基础架构部高级工程师闫燕飞分享了《Kafka 高性能解密及优化》,深度解析了 Kafka 的技术架构,并从存储与消息格式等方面分享了 Kafka 高性能的原因,同时对优化其性能也提出了一些见解。

闫燕飞:Kafka 高性能解密及优化

腾讯云+社区技术沙龙 Kafka Meetup 是由腾讯云+社区和 Kafka 社区主办的 Kafka 线下技术分享活动。此次是 Kafka Meetup 第一次在深圳举办,由开源中国协办。活动不仅扩大了 Kafka 开源社区的影响力,也引发了开发者对于 Kafka 的应用场景及未来走向的进一步思考。

现场合影

部分听众
嘉宾合影
部分工作人员与志愿者

【联合主办方】

【直播支持】

现场资料

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

编辑于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏花叔的专栏

关于小程序/小游戏接入广告的解读

微信放开了广告组件的接入条件,官方说开通banner广告和视频激励广告的条件很简单,只有两点:

39840
来自专栏CSDN技术头条

Dropbox存储架构:扩展至EB级别的实践

多年前,我们将 Dropbox 称为“魔力口袋”,因为它设计的初衷就是让用户将所有文件放在一个顺手的地方。一路发展下来,Dropbox 已经从一个简单的东西发展...

31160
来自专栏CSDN技术头条

SDCC 2015架构专场札记:一线互联网公司的架构实践

【编者按】11月21日,为期三天的SDCC2015中国软件开发者大会成功闭幕,主办方总计邀请了95余位演讲嘉宾,为参会者奉献了10个主题演讲,9大技术专场论坛(...

23070
来自专栏官网开发

企业网站革命性升级,好看、高效、低成本,“响应式官网”新生机…

H5网站大家可能并不陌生,要是换个说法,部分人可能就有点不知所以然了,比如“响应式网站”“自适应网站”,这两个词也不是本来就有的,随着网站制作的前端技术不断更新...

16250
来自专栏SeanCheney的专栏

《Python分布式计算》 0 序言 (Distributed Computing with Python)作者简介审稿人简介序言本书的内容

Python分布式计算 ---- 作者简介 Francesco Pierfederici是一名喜爱Python的软件工程师。过去20年间,他的工作领域涉及天文学...

39570
来自专栏ThoughtWorks

容器化时代对测试的机遇 | TW洞见

今日洞见 文章作者/图片来自ThoughtWorks:梁真,图片来源于网络。 本文所有内容,包括文字、图片和音视频资料,版权均属ThoughtWorks公司所有...

365140
来自专栏云计算D1net

云计算服务提供商不能会告诉你的秘密

云计算具有成本、资源扩展、弹性大等优势,但任何事物犹如硬币具有两面性,云计算也有一些你必须知道的劣势,服务提供商是想要把你所在他们的产品上,但并没有强迫你维持忠...

35930
来自专栏云计算D1net

按需所取、弹性分配的云计算

云计算是一种按使用量付费的模式,这种模式提供可用的、便捷的、按需的网络访问, 进入可配置的计算资源共享池(资源包括网络、服务器、存储、应用软件,服务),这些资源...

58040
来自专栏智能计算时代

微软保护物联网的新颖方法

Sopris项目希望创建一套可以保护硬件和通信的安全层,并且可以刷新受影响的设备。 ? 事物部署工业互联网面临的主要问题之一是常年问题:安全。当您在组织周围部署...

28150
来自专栏沃趣科技

从运管到云管,从离散走向集约

刚刚过去的火热七夕节,也恰巧是云计算诞生十周年纪念日。十年前的今天,Google创始人埃里克·施密特在公司年度战略大会上首次公开提出“Cloud Computi...

42360

扫码关注云+社区

领取腾讯云代金券