前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >字节、小红书、京东、美团技术专家,和你一起进行云原生改造 | ArchSummit

字节、小红书、京东、美团技术专家,和你一起进行云原生改造 | ArchSummit

作者头像
深度学习与Python
发布2023-03-29 12:14:19
6020
发布2023-03-29 12:14:19
举报
文章被收录于专栏:深度学习与python

在企业的数字化转型中,大数据已成为支撑经营和业绩增长的主要手段之一。通过升级云原生架构,可以为大数据在弹性、多租户、敏捷开发、降本增效、安全合规、容灾和资源调度等方向上带来优势。如何让云原生大数据在企业中发挥最大效用,也是许多技术伙伴关注的事情。

在 3 月 17 日和 18 日,ArchSummit 全球架构师峰会(北京站)即将落地北京,我们策划了【云原生大数据实践】,邀请了字节跳动火山引擎云原生计算技术负责人李亚坤,担任专题出品人。在筛选了十几个议题之后,我们确定了本专题的四场分享,分别如下:

首先,我们邀请了火山引擎云原生计算架构师余炜强,他以《字节跳动云原生大数据的发展之路》为主题展开分享。随着字节跳动旗下业务的快速发展,数据急剧膨胀,原有的大数据架构在面临日趋复杂的业务需求时逐渐显现疲态。而伴随着大数据架构向云原生演进的行业趋势,字节跳动也对大数据体系进行了云原生改造。通过他的演讲,你可以了解到了解云原生如何解决架构痛点、了解云原生如何带来成本优势、以及学习从存储、调度、接入层到统一管控面完整的建设方案;

其次,我们邀请了小红书大数据研发工程师王成。王成讲师负责小红书 OLAP 方向的研发工作,主要包括云原生 ClickHouse、湖仓一体化的研发与落地,有丰富的 OLAP 架构经验。他将以《小红书云原生 OLAP 的建设与实践》为你带来分享。

ClickHouse 是目前最热门的 OLAP 引擎,极致的分析性能使其在越来越多的公司内得到推广和使用。在小红书,随着业务的增长,由于 ClickHouse 存算不分离的架构,在运维管理、成本控制等方面的劣势进一步显现。因此小红书 OLAP 团队结合业务使用中的痛点,以及云上部署的特点,设计并实现了一套云原生的 ClickHouse 产品,从而显著提升了系统的可靠性和扩展性,并且他们基于云原生 Clickhouse,进一步推动了 LakeHouse 建设,显著降低了数据准备成本。

通过王成讲师的分享,你可以了解小红书在 ClickHouse 云原生架构设计上的思考与探索,以及了解小红书在 LakeHouse 上的思考与探索;

接着,我们邀请了京东大数据架构师吴维伟。吴维伟讲师多次参与 618、双 11 的护航保障活动。在分布式存储架构设计、存储跨域与容灾、存储内核优化等方向上有深厚经验。他的分享主题是《云原生跨域大数据架构落地实践》。京东大数据平台早期使用多地多机房的部署架构,高效服务京东的各业务场景。不过随着业务的迅猛增长和业务融合,各机房资源利用不均的问题越来越严重。为了提升整体资源利用率,以及建造可持续的大数据平台,京东开始了云原生改造。通过他的分享,你可以了解云原生跨域架构的痛点,以及了解如何通过技术手段实现大数据的极致降本增效;

最后,我们邀请了美团数据平台资源与系统组负责人吴通。吴通讲师负责美团大数据及机器学习基础设施建设,推动并主导云原生改造。他将以《美团大数据及机器学习基础设施云原生改造实践》为题展开分享。在早期,美团大数据和机器学习基础设施是基于 Yarn 构建的,随着业务复杂度的增加,渐渐暴露出各类问题,美团不得不进行基础设施的架构升级。由于机器数量庞大,业务复杂度高,在实践过程中,美团采取了先对机器学习场景云原生化改造,逐步完成所有场景云原生改造的方式。通过吴通讲师的分享,你将了解大规模集群架构升级的完整过程及关键问题、以及了解云原生在大规模集群从 0 到 1 落地的经验。

活动推荐

3 月 17 日 -18 日,ArchSummit 全球架构师峰会(北京站)即将落地。来自百度、京东、华为、腾讯、斗鱼、中国信通院等企业与学术界的技术专家,将就数字化业务架构、低代码实践、国产化替代方案、分布式架构等主题展开分享讨论。

目前已上线数字化场景下的业务架构、低代码实践与应用、国产软件优化迭代之路、多数据中心的分布式架构实践、软件质量保障、技术 - 产品 - 业务、高并发架构实现、架构师成长与团队搭建落地实践、大数据和人工智能融合、大规模微服务架构演进、可观测技术落地、云原生大数据实践等多个专题,点击阅读原文去官网查看大会日程。

会期临近,门票即将售罄,购票或咨询其他问题请联系票务同学:15600537884(微信同电话)

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2023-03-03,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 InfoQ 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
容器服务
腾讯云容器服务(Tencent Kubernetes Engine, TKE)基于原生 kubernetes 提供以容器为核心的、高度可扩展的高性能容器管理服务,覆盖 Serverless、边缘计算、分布式云等多种业务部署场景,业内首创单个集群兼容多种计算节点的容器资源管理模式。同时产品作为云原生 Finops 领先布道者,主导开源项目Crane,全面助力客户实现资源优化、成本控制。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档