发布

腾讯大数据的专栏

专栏成员
332
文章
496561
阅读量
125
订阅数
Kona CodeRevive:高性能JIT缓存方案及在腾讯大数据应用
| 导语 Kona JDK是经过腾讯大规模生产实践验证的JDK发行版本,并且提供长期稳定的支持,CodeRevive是Kona JDK针对大数据实际应用中Just-In-Time(JIT)编译开销进行优化的新特性。通过在线的缓存和聚合JIT编译的结果,大幅度减少腾讯大数据现网JIT编译的开销并且提升整体吞吐量。
腾讯大数据
2025-02-05
1241
Meta AI研究员、英伟达工程师称赞的数据分析工具DataLab是什么
近日,腾讯大数据发布在arXiv的一篇学术论文《DataLab: A Unified Platform for LLM-Powered Business Intelligence》引起了各界同仁的广泛关注,前Meta AI研究员在推特和领英上分享该论文,同时又有领域大V相继转载,使得DataLab被推到了大数据领域的风口浪尖。
腾讯大数据
2025-02-05
4010
基于 Iceberg 打造高效、统一的腾讯广告特征数据湖
概述:腾讯广告业务的特征生产计算每天都会处理万亿级的新增记录和 PB 级的中间数据,并管理数十 PB 规模的历史结果。为了解决海量数据在读写性能(含更新)和存储管理上的痛点,广告特征工程团队和智能湖仓团队在对比业内主流存储组件后,选取 Iceberg 来构建广告特征数据湖。
腾讯大数据
2025-02-05
1160
腾讯大数据基于StarRocks的向量检索的技术实现与实践分享
此次分享讲介绍当前业内向量检索技术及其在大数据领域的实现方式,并详细介绍了腾讯大数据在StarRocks上实现向量检索的技术原理及在腾讯内的实践案例,同时总结当前碰到的挑战及未来规划,干货满满!
腾讯大数据
2025-02-05
1000
活动|腾讯大数据×2024数据智能大会技术交流回顾
6月19-20日,由中国通信标准化协会主办,中国通信标准化协会大数据技术标准推进委员会(CCSA TC601)承办的首届“数据智能大会”在京召开。
腾讯大数据
2024-06-27
3650
天穹DOP 在腾讯广告经营数仓场景的应用实践
■ 腾讯广告经营数仓是腾讯广告打造的数据分析和数据服务平台,它提供了包括数据运营分析、广告优化分析在内数据分析支持,以及数据可视化服务。经营数仓积累了大量的广告效果数据、客户管理信息和产品工具数据,为腾讯内众多的数据分析和运营分析用户提供便捷高效的 SQL 取数服务。为了保障数据查询服务的稳定与高效,该数仓不仅采用了Spark引擎,还部署了Presto集群,目的是能够根据用户提交的SQL的特点,智能选择最合适的查询引擎。
腾讯大数据
2024-06-27
2990
腾讯联合生态伙伴,共同推动业界首个异构硬件编程模型标准立项!
近期,由腾讯联合中国移动、中国联通、中国信通院、中国科学院计算技术研究所共同发起,在中国通信标准化协会(CCSA)互联网与应用委员会(TC1)推动异构硬件两项行业标准成功立项。
腾讯大数据
2024-06-19
2390
腾讯大数据|面向AB场景的DOP存缓一体解决方案
腾讯数据编排技术开源协同团队负责人——毛宝龙出席并分享了:《面向AB场景的DOP存缓一体解决方案》。
腾讯大数据
2024-05-23
2840
腾讯大数据|天穹SuperSQL执行核心剖析
1. 数据孤岛:由于历史原因以及不同数据中心的业务差异性,众多异构数据源形成了数据孤岛,导致大量且繁重的人工数据搬迁。与此同时,由于不同国家的数据安全法限制,很多数据无法搬迁,数据安全和查询效率都难以保证
腾讯大数据
2024-04-28
1.6K0
腾讯天穹 StarRocks 一站式湖仓融合平台架构揭秘
腾讯天穹是协同腾讯内各 BG 大数据能力而生的 Oteam,作为腾讯大数据领域的代名词,旨在拉通大数据各个技术组件,打造一个具有统一技术栈的公司级大数据平台体系。从底层数据接入、数据存储、资源管理、计算引擎、作业调度,到上层数据治理及数据应用等多个环节,支持腾讯内部近 EB 级数据的存储和计算,为业务提供海量、高效、稳定的大数据平台支撑和决策支持。
腾讯大数据
2024-03-07
1K0
我们正在热招@腾讯TEG数据平台部
腾讯大数据
2023-10-25
6010
四届赛事,拿下18冠!
在全球文字识别(OCR)领域顶级盛会ICDAR 2023上,腾讯OCR团队基于自研算法,斩获四项冠军,这是继2017年、2019年、2021年以来,连续四届参会同时创造佳绩,共获得18项官方认证冠军,展示了腾讯OCR技术在全球的一流水平。
腾讯大数据
2023-10-25
3720
【活动回顾】腾讯大数据 x StarRocks|构建新一代实时湖仓
2023 年 9 月 26 日,腾讯大数据团队与 StarRocks 社区携手举办了一场名为“构建新一代实时湖仓”的盛大活动。活动聚集了来自腾讯大数据、腾讯视频、腾讯游戏、同程旅行以及StarRocks 社区的技术专家,共同深入探讨了湖仓一体技术以及其应用实践等多个备受瞩目的话题,观看人数过万。
腾讯大数据
2023-10-23
6300
直播预约中!9.26腾讯大数据XStarRocks技术专题探讨
随着数据爆炸式增长,如何高效处理和分析海量数据已经成为关键挑战,结合传统数仓与数据湖优势的湖仓一体(Lakehouse)架构崭露头角,成为大数据领域势不可挡的趋势。
腾讯大数据
2023-09-17
2540
腾讯大数据平台大脑AI探索与实践
导读 近年来大数据业务规模迅速增长,为大数据平台运营治理带来了新的挑战:海量大数据任务的治理,缺乏统一、标准的数据与评估模型和治理工具,难以支持对大数据任务执行效率、稳定性等进行持续优化。腾讯大数据平台摸索出数据+算法驱动的“平台自治”方案,对于万亿级大数据分析逐步实现“自动化运营”,以一站式的自诊断、自优化、自管理能力,大大降低大数据产品使用门槛。
腾讯大数据
2023-07-25
8540
直播|分析型湖仓论坛
随着湖仓技术的持续演进,数据仓库和数据湖方案在快速演进和弥补自身缺陷的同时,二者之间的边界也逐渐淡化,湖上建仓、仓中数据降冷到湖、物化视图、冷热融合查询等方案也越来越多的成为各个公司的标配,各大厂商也陆续提出了自己的湖仓融合方案,通过湖仓融合技术来提升业务使用体验的同时也降低了业务的使用成本。
腾讯大数据
2023-07-12
3620
腾讯捐赠编译器基础软件,为中国开发者“添了双筷子”
6月11日,在2023开放原子全球开源峰会上,腾讯正式宣布将打磨多年的Java应用操作系统“OpenKona”捐赠给开放原子开源基金会,联合基金会以及数以百万计开发者,共建国产编译器基础软件,推动数字基础设施加速突破。
腾讯大数据
2023-07-12
3870
内存省一半、CPU降三成,腾讯大数据团队论文入选数据库顶会 VLDB!
2023 年 8 月 28 日至 9 月 1 日,第49届VLDB国际会议将在加拿大温哥华举行。腾讯大数据平台大脑团队在Spark自动调优领域的研究成果入选了VLDB 2023,并受邀在大会上进行现场报告。 VLDB国际会议 (全称为International Conference on Very Large Data Bases)于1975年在美国的弗雷明汉马成立, 与另外两大数据库会议 SIGMOD、ICDE 构成了数据库领域的三大顶级会议,已成为数据库研究人员,供应商,参与者,应用开发者,以及用户一
腾讯大数据
2023-05-24
6170
8大技术论坛,21场主题分享,大牛齐聚邀你看直播!
随着《腾讯大数据构建之道》著作的出版,腾讯大数据首次对外披露了自身大数据核心技术体系架构和海量业务应用实践。为了将腾讯大数据十余年发展的经验沉淀和最新的前沿技术实践回馈给行业和用户,腾讯大数据准备搞大事啦! 4月17日,腾讯大数据联合机械工业出版社举办的 十年一剑·数擎未来 《腾讯大数据构建之道》专题技术沙龙就要正式开始直播啦! 本次专题技术沙龙将由腾讯28位业务专家围绕《腾讯大数据构建之道》带来云原生大数据、大数据采集、大数据计算引擎、实时湖仓一体化、大数据与机器学习、大数据治理、大数据平台产品、大数据平
腾讯大数据
2023-04-19
3640
Tencent Kona JDK参与开放原子“校源行”活动
4月2日,以"聚缘于校,开源共行"为主题的开放原子校源行(北京站)活动在北京航空航天大学举行。该活动由开放原子开源基金会、央视网联合主办,北京航空航天大学承办。工业和信息化部信息技术发展司、人事教育司的相关负责领导,教育部高等教育司的相关负责领导,全国数十所高校代表,数百名北京航空航天大学学生及相关企业、开源项目的负责人等共同参加了此次活动。 在此次开放原子校源行活动中,腾讯公司的多个开源项目积极参与,其中就有来自于腾讯大数据团队的开源项目Tencent Kona JDK(以下简称为Kona JDK)。该
腾讯大数据
2023-04-06
4240
点击加载更多
社区活动
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·干货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档