首页
学习
活动
专区
工具
TVP
发布

腾讯大讲堂的专栏

专栏成员
1218
文章
1442586
阅读量
205
订阅数
实时湖仓一体在腾讯的实践落地丨DAMS峰会
2023 DAMS中国数据智能管理峰会-上海站将于3月31日盛大举办,峰会设置了大数据、数据治理&数据资产管理、信创数据库、信创运维、金融&运营商等五大主题专场,与大家一起探索大数据与云原生强强联合的方式,挖掘由此激发的软件发展和技术进步。其中,腾讯实时湖仓团队负责人邵赛赛老师将分享《实时湖仓一体在腾讯的实践落地》,内容概要提前剧透: 实时湖仓一体在腾讯的实践落地 议题要点及收获: 湖仓一体技术可以为业务带来原先Hadoop数仓所无法提供的能力,包括流批一体架构、行级更新、schema evolutio
腾讯大讲堂
2023-03-07
3860
DB · TALK 来了!数据库管理与运维专场 周三见
数据库作为数字经济发展的底层核心技术,搭乘云计算的马车在推动企业数字化转型的道路上飞驰。随着移动互联网的崛起,云数据库已经成为企业的首选。同时相比较于传统数据库,国产数据库技术取得了长足进步,更适用于企业的生产环境和IT系统。 腾讯云数据库拥抱云原生和国产化的趋势,致力于发展自研数据库技术,帮助全行业用户降低上云成本。其中腾讯云TDSQL已被3000多家来自金融、公共服务和电信垂直行业的客户采用,中国十大银行中的六家都应用了该产品。 为帮助开发者更好地了解和学习前沿数据库技术,腾讯云数据库特推出"DB ·
腾讯大讲堂
2022-03-29
3860
程彬:云原生时代的腾讯数据库技术实践
11月3/4日,以“数实融合,绽放新机”为主题,聚焦产业趋势与技术前沿,打造产业互联网顶级盛会的2021腾讯数字生态大会在武汉举办,腾讯云数据库技术负责人程彬进行了《云原生时代的数据库技术实践》的主题演讲,分别从云原生时代数据库技术何去何从,新时代下如何构建TDSQL-C数据库产品和TDSQL-C在云上实践经验等三个方面进行分享。 (以下是通过程彬现场演讲全文整理) 时来云转 :云时代的数据库应云而生、依云而建 当云计算这个词还热度未减时,云原生的时代却已悄然而至,也因此用户使用云的方式发生了极大的变
腾讯大讲堂
2021-11-17
1.2K0
如何避免承载亿级用户的服务端雪崩
腾讯云数据库MongoDB作为一款基于开源社区MongoDB版本的文档数据库产品,其承载着公司内外包括微信、看点、QQ音乐在内的亿级用户重量级APP产品。在某些场景的使用过程中,用户在客户端请求超时后会不断重试,可能导致服务端大量请求积压,出现恶性循环甚至导致服务雪崩。一般遇到这种情况,后台会自动检测并做服务降级,主动拒绝一部分用户请求,或者重启后端服务等举措来应对。但是这些措施对业务有损,或者不可自行恢复。 本文围绕 MongoDB 原生 maxTimeMS 特性和腾讯云MongoDB的优化,并结合
腾讯大讲堂
2021-10-25
8300
【大讲堂专属福利】DAMS峰会:数据治理、中台、AIOps、混沌工程、DataOps、机器学习,以及大型银行的金融科技实践
近年来,因数据衍生、关联、发展起来的技术层出不穷,我们不断探索数据从资源转化为资产的方法,又面临在数据共享和互通中引发的安全隐患;我们迫切希望进行企业核心数据库的开源化、国产化替换,又碍于“恐龙级”老旧系统的历史遗留问题而难以开展;同时,我们还需要持续跟进如AIOps、DataOps、混沌工程等新兴技术理念,制定适合自身企业的落地方案…… 为了和大家一起攻克这些疑难,第七届DAMS中国数据智能管理峰会将于2021年8月27日在上海举办,携手中国信通院云大所、阿里、腾讯、蚂蚁集团、美团、携程、快手、工商银行
腾讯大讲堂
2021-07-02
2.1K0
云巢揭秘:数据库产品 PaaS On IaaS 实践分享
作者:kevinyfsun(孙勇福)  腾讯CSIG云产品研发工程师 导语| 随着2B行业的蓬勃发展,数据库产品中心原有烟囱式发展模式,在资源调度和统一管控上面临的挑战越来越多。同时腾讯云IaaS产品经过十几年的发展,可以提供可靠稳定的服务。当前 Kubernetes 已经成为资源编排的事实标准,TKE 产品形态在腾讯公有云运行多年,基于 TKE 实现数据库领域的 PaaS on IaaS 成为一个可行方案。 本文主要分享数据库产品中心基于 TKE 实现 PaaS On IaaS 的实践整体过程,未来会有
腾讯大讲堂
2021-06-08
2.3K0
被热捧的云原生,和大数据怎么结合才能驱动商业?
作者:陈龙 腾讯专家工程师、腾讯云EMR技术负责人 |导语  在金融行业IT系统国产化的大背景下,国内金融行业开始推动IT基础设施国产化,逐渐摆脱对于传统IOE架构的依赖。微众银行自成立之初,就放弃了传统IOE架构路红,结合腾讯金融级分布式数据库TDSQL,建立了基于DCN单元化架构模式的分布式基础平台。如今这套架构承载了微众银行数亿级别的用户规模,数百套银行核心系统,和每天数亿次的金融交易。 近几年炙手可热的云原生首先由Matt Stine提出并延续使用至今,但其并没有标准的、严格的定义,比较公认的四要
腾讯大讲堂
2021-05-21
4630
数据采集上报之灯塔SDK详解
作者:jackhuali  腾讯PCG工程师 |导语  灯塔SDK当前的日活终端设备数超过10亿,日事件上报量超过万亿条,灯塔SDK是什么,灯塔SDK做了哪些工作来支撑如此大业务需求的呢?灯塔SDK是怎么保障业务客户端事件数据上报的准确性的呢?带着问题我们接下来一步步进行拆解。 灯塔SDK从2011年左右诞生至今,并随着PCG数据治理地持续推进,灯塔SDK逐步被各个业务线所深度使用,灯塔SDK逐渐收敛其余上报通道,成为了公司级统一的数据上报通道。 以下总结了大家日常对灯塔SDK集成、测试、数据验证等使用过
腾讯大讲堂
2021-05-10
3.8K0
【文中有福利】Gdevops广州站:全链路监控、数仓集群、智能运维、混沌工程等实操解析
2021 Gdevops全球敏捷运维峰会 - 广州站,将在5月28日盛大举办。Gdevops经过创办6年成功举行近20场大会的经验积淀,于本次峰会打磨精选出最贴合当下运维痛难点及运维转型趋势热点的议题,本文带大家先睹为快。 腾讯大讲堂·限时专属优惠 报名 福利一: 扫描下方二维码,关注腾讯大讲堂,回复“Gdevops全球敏捷运维峰会·广州站”,就有机会抽取免费门票 福利二: 限时特价优惠门票有限,码上报名 运维主题看点 讲师介绍:现任职新炬网络副总裁,多年跨国大型IT企业的团队管理、销售和市
腾讯大讲堂
2021-04-21
6.5K0
【腾讯微视】百亿数据、上百维度、秒级查询的多维分析场景的实践方案
作者:teachzhang  腾讯PCG工程师 |导语  大数据多维分析是业务中非常常见的分析场景,目前也有许多落地方案,但是在遇到上百亿数据、维度个数不限、秒级返回结果这样的场景时,实现的时候还是遇到了一些挑战。本文介绍了一种参考kylin的预聚合模式实现的存储方案,支持对上百亿数据以及数百个维度的多维分析,并且能在秒级返回查询结果。该方案可以运用于多维指标拆解分析,异动归因分析业务场景。希望给其他有类似分析场景的同学提供一种参考方案,对本内容感兴趣的同学,欢迎一起交流学习。 1. 背景 周报场景:微视
腾讯大讲堂
2021-03-15
1.9K0
技术人员做数据质量治理实践总结
作者:vanping  腾讯IEG后台开发工程师 |导语  当一个数据系统越来越复杂,参与方越来越多,其需要管理的数据量越来越庞大时,数据治理尤其是针对数据质量的治理就变得越来越重要且紧迫了。 本篇文章主要是对我过去一段时间针对O2所做的数据质量治理工作做一总结与分享,希望能够帮助到同样在做数据质量治理工作的同学。 01 导语 本人是IEG市场平台部的一名开发人员,目前主要负责O2广告投放系统的开发以及数据质量治理工作。O2是市场平台部-市场平台增长中心用于做游戏广告投放以及相关效果数据回收展示的系统。该
腾讯大讲堂
2021-01-19
8850
云计算是技术驱动的商业模式
作者:cipherliu  腾讯CSIG高级产品经理 |导语 越来越多的同学加入到云与智慧产业行列中,相信每个人或多或少都有思考过,为什么要上云?,什么是云计算?,怎样才算云原生? | 云计算是技术驱动的商业模式 数据库圈对08年Oracle Founder & CEO Larry Ellsion 采访中的观点 "云计算是什么鬼?What the hell is cloud computing” 并不陌生。 后面的事情大家都知道了,Oracle 全面启动云战略,财报也将各种License收入并表入云,但
腾讯大讲堂
2020-12-28
2.8K0
区块链赋能下的数据治理新思路
作者:konradliu,腾讯CSIG区块链产品经理 |导语 大数据时代,数据源源不断产生并且汇集,数据已经成为企业间竞争的关键和影响国家竞争力的重要因素,大规模数据汇聚导致数据垄断困境的出现,进一步,使数据被不合理的分配与享用,然而,大规模数据收集也带来严峻的隐私泄露、数据滥用和数据决策不可信等问题,对传统的数据治理提出了新的挑战,数据隐私如何保护、数据交易和共享中如何可信传输、数据所有权与使用权如何厘清、数据价值如何合理定价等问题如何解决,并使数据得到正确和规范的使用是决定大数据继续发挥价值的关键,也
腾讯大讲堂
2020-12-07
1.3K0
专属福利 | Gdevops北京站:数仓与中台建设、数据库国产化、AIOps,以及近10家银行的金融科技实践
2020 Gdevops全球敏捷运维峰会·北京站将于12月11日举办,除了持续追踪数据库及运维领域的技术更迭、发展趋势以外,本次峰会将重点聚焦Fintech金融科技,携手腾讯、蚂蚁金服、中国银行、中邮消费金融、建设银行、工商银行、农业银行、民生银行、光大银行、华夏银行、58到家、AWS、中国联通、浙江移动、新炬网络、爱可生等名企的技术掌舵人,展望数据库云化及国产化发展趋势,破解运维转型困局,助力金融科技战略落地。 腾讯大讲堂 · 专属优惠 福利一: 扫描下方二维码,关注腾讯大讲堂,回复“Gdevops全球
腾讯大讲堂
2020-11-18
1K0
Mysql数据库全局分析及太极后端优化实战
| 导语 腾讯机器学习平台太极后端数据库是自己运维的Mysql,历史原因没有用公司CDB、TDSQL等,之后还是要进行数据库迁移把db维护交给专业的人去运维,这块太极平台没有专门的dba运维出现了不少问题,如Mysql主节点硬盘故障,备机切主导致系统中断半小时;后端接口调用不合理导致循环调用数据库致使数据库cpu持续维持在高位以及前端接口数据返回缓慢等问题。这块Mysql优化就需要开发自己去多了解Mysql系统架构、性能调优相关问题,监控Mysql 机器运行状态,本文就简单介绍下Mysql系统分析思路和采
腾讯大讲堂
2020-09-24
7320
云开发数据库的最佳实践
点击“阅读原文” 即可观看直播哦~ 产品成长期如何用设计提升产品增长 从微信支付看研发如何提高运营效能 腾讯SQL“现役运动员”给你的实践小技巧
腾讯大讲堂
2020-06-18
5270
互联网人,地摊界的天之骄子!
地摊经济在一夜之间火了,仿佛一束希望之光降临,唤醒了万千互联网人心中蠢蠢欲动的摆摊之梦。 可千万别小看互联网人,虽然看似天天坐在空调房里敲键盘,但真要摆起摊来谁还不是多才多艺、有模有样? 今天随机采访了一些同学,一起来看看互联网人的第二春——下海摆摊,究竟都能做些什么吧!?小腾老师今天随机采访了一些同学,一起来看看互联网人的第二春——下海摆摊,究竟都 奋斗的互联网人 千万别小看互联网人,虽然看似天天坐在空调房里敲键盘,但真要摆起摊来谁还不是多才多艺、 来——摆——摊——吧! 千万别小看互联网人,虽然
腾讯大讲堂
2020-06-06
4530
小程序云开发直播 - 数据库专题
从微信支付看研发如何提高运营效能 腾讯SQL“运动员”给你的实践小技巧 带你了解腾讯最坚实的支撑事业群
腾讯大讲堂
2020-06-01
6510
腾讯SQL“现役运动员”给你的实践小技巧
引言 SQL的全称是Structured Query Language(结构化查询语言),是一种古老而简洁的程序设计语言。看似平平无奇,一直被各种吐槽,但却有着众多语言所难得的漫长寿命,并展现出极好的拓展性,在不同时期衍生出不同的子语言。笔者作为腾讯TDW体系下的SQL现役运动员,对日常工作中常用的基础知识和展开的业务实践予以了总结,可供读者参考。 结构化查询语言,顾名思义,它的基础在于结构化的数据库表,最主要的应用场景在于数据查询,虽然SQL也可以像其它语言一样有一些高级的写法,但它的主战场并不在此,仍
腾讯大讲堂
2020-05-25
6200
ZooKeeper 源码和实践揭秘
作者:runnerzhang,腾讯 CSIG 后台开发工程师 ZooKeeper 是个针对大型分布式系统的高可用、高性能且具有一致性的开源协调服务,被广泛的使用。对于开发人员,ZooKeeper 是一个学习和实践分布式组件的不错的选择。本文对 ZooKeeper 的源码进行简析,也会介绍 ZooKeeper 实践经验,希望能帮助到 ZooKeeper 初学者 。文章部分内容参考了一些网络文章,已标注在末尾参考文献中。 初衷 在业务中使用了 ZooKeeper 作为消息系统,在开发和运维过程中,也遇到一些
腾讯大讲堂
2020-04-23
7460
点击加载更多
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档