文章出处: 鹅厂架构师 导读 腾讯 MongoDB 百万库场景下的性能优化成果汇报 腾讯 MongoDB目前广泛应用于游戏、电商、ugc、物联网等场景,很多客户在使用过程中库表数量会大量增长,甚至达到百万级别,导致性能急剧下降,严重影响客户业务。腾讯数据库研发中心CMongo团队在进行深入性能分析之后,改造底层引擎为共享表空间架构,新架构在百万级库表的场景下,相比原生版本读写性能提升 1-2 个数量级,内存消耗显著降低,启动时间从原先小时级缩短到一分钟内。 探索之路正式开始,文章很长但干货满满,建议收藏品
经过调研,我们发现 SkyWalking 这一款用于微服务(Docker, Kubernetes, Mesos)框架下的分布式应用行为监控工具刚好能满足我们的需求。
针对虚拟机中CPU硬件性能事件与软件代码匹配不够准确的问题,腾讯云技术团队经过深入研究和硬件探索,自主设计了Guest PEBS(精确事件采样技术) 特性在KVM上的虚拟化方案。这项技术的独到之处在于,让虚拟机上CPU运行数据从此由“黑盒”变成了“白盒”,云上开发者从此能够随时随地洞察CPU的运行状态和数据。
释放数据价值,助力数智转型,本次腾讯全球数字生态大会数据库专场中,各路大咖为我们带来腾讯云数据库的最新动态:全域解决方案、TDSQL新品发布、合作伙伴计划……以下是搜狐畅游数据库团队的负责人李凌在大会分享的图文和视频回顾,请查收~ 关注“腾讯云数据库”公众号,回复“畅游”,即可下载直播分享PPT。 各位嘉宾大家好,我是来自畅游的数据库团队负责人——李凌,很高兴在这里与大家分享畅游腾讯云数据库的使用经验。 畅游是一家全球化的游戏公司,5年前,畅游选择了腾讯云作为畅游全球云产品供应商之一,而这5年来,腾讯
随着互联网的不断发展和逐渐普及,各行各业也纷纷选择了上云之路,腾讯云数据库致力于运用领先技术,助力企业上云,腾讯云自研的金融级分布式数据库TDSQL 是一款具备强一致高可用、全球部署架构、分布式水平扩展、高性能、企业级安全等特性的数据库产品,《图说TDSQL》栏目将以图文结合的形式,带大家了解TDSQL的方方面面。
从 2017 年开始,InfoQ 在策划 ArchSummit 全球架构师峰会,主题方向经历过:微服务架构落地,那是微服务架构最火的时候。后来到了人工智能技术应用,深度学习、机器学习算法等等大规模探索时期。再到降本增效,各个公司开始缩减成本,提升研发效能,组建中台团队。这两年则是云原生架构,讨论服务网格,无服务器开发。去年大家围绕低代码开发做了各种尝试,业内也出现了像宜搭这样的低代码平台,但如果将低代码落实到业务系统,还有一段路要走。而今年的技术方向,开始关注数字化转型下的架构升级,不仅仅是技术层面,还包括流程和组织层面的架构。
在2021年11月10日举办的 openEuler Summit 2021 上,工信部副部长王志军表示,国产操作系统已逐步摆脱缺技术少生态的困境,在重点行业获得规模化应用和市场认可。现场华为宣布将欧拉开源操作系统(OpenEuler,简称“欧拉”)正式捐赠给开放原子开源基金会。 峰会上,中国电信副总经理刘桂清正式发布天翼云操作系统CTyunOS,这也意味着天翼云逐渐起步布局底层核心技术。中国电信根据操作系统领域新趋势,结合自身业务需求,以云网融合战略为牵引,推出基于openEuler的操作系统CTyunO
微服务架构是一种软件开发模式,它将一个复杂的应用程序拆分为多个个独立的、小型的、可复用的服务,每个服务负责一个特定的业务功能。
从字面上看,研发效能追求的是“效率”,但是脱离目标谈效率是没有意义的。从研发的角度看,软件的意义就是交付用户和客户的所需,从而产生价值。因此,研发效能就是更快地为软件的用户或客户交付价值。这里的价值包括以下几个方面。 有效性:让业务交付的服务与客户的需求及市场更加匹配,即对不对的问题。 质量:提升业务的安全性和可靠性、用户体验等,即好不好的问题。 效率:提升研发运维和变更的效率,即快不快的问题。 2021 年,腾讯 CSIG 技术委员会成立了研发效能提升组,基于腾讯云的技术标准化,以CODING 为底座,建
---- 本文摘录于 《软件研发效能权威指南》 作者:周桂明 腾讯会议高级架构,腾讯云与智慧产业事业群 DevOps 与研发效能架构师 从字面上看,研发效能追求的是“效率”,但是脱离目标谈效率是没有意义的。从研发的角度看,软件的意义就是为用户和客户交付他们的所需,从而产生价值。因此,研发效能就是更快地为软件的用户或客户交付价值。这里的价值包括几个方面: 有效性:让业务交付的服务和客户的需求及市场更加匹配,即对不对的问题。 质量:提升业务的安全性和可靠性、用户体验等,即好不好的问题。 效率:提升研发运维和
腾讯云运营着国内云厂商中最大规模的容器集群,支撑游戏、微信、广告等业务的数十亿计用户。腾讯云企业级容器云平台TKE,弹性容器EKS,以及服务网格Tencent Cloud Mesh,基于成熟的Kubernetes技术和生态,帮助企业实现容器的混合云部署,并为用户提供了开箱即用的云原生服务网络管控平台。
想必大部分开发者都知道,边缘加速是通过在全球范围内部署分布式边缘节点,将内容和应用程序缓存到离用户最近的位置,从而实现更快速、高效的内容传输和应用访问。而EdgeOne在此基础上,注重安全加固,通过提供安全防护机制和强化的安全策略,确保用户数据和应用的安全性,这种边缘加速与安全加固的结合为用户提供了更可靠、安全的网络加速服务。
随着信息技术时代新拐点的到来,中国科技自主创新大航海时代也已到来,在政策及需求的双重推动背景下,操作系统及基础软件国产化将面临前所未有的机遇与挑战。
摘要 日前,腾讯云大数据数据湖计算 DLC 与国内两家知名云厂商的数据湖产品进行了性能对比,其中腾讯云 DLC 在三款产品中SQL平均执行查询时间短,性能表现优。腾讯云大数据 DLC 在存算分离和大数据量查询场景下,海量查询性能较 A 厂商 产品提升 248%,较 B 厂商产品提升36%。 在存算分离大数据量查询场景下,腾讯云大数据 DLC 较 A 厂商 、B 厂商表现更优,同时在较大任务上的任务执行成功率更高,所有任务均成功执行。结合性能、性价比、使用体验等因素,腾讯云 DLC 在云原生数据湖选择上整体上
👆点击“博文视点Broadview”,获取更多书讯 今天,Bug和性能问题成为威胁软件健康的两大的话题。 从单机时代开始,我们就投入了不计其数的人力、物力研究性能;随着分布式系统的大量应用,对于性能问题的分析、调优,面临着很多前所未有的挑战。 性能是一座“桥梁”,连接了优秀的用户体验与更低的运维成本。 性能也是一座“金矿”,让组织可以从云、网络和大规模企业系统获取惊人的经济收益。 而在今天谈论性能,绝对绕不开火焰图发明人——Brendan Gregg,他可能做梦都没想到,自己写的两个perl 脚本成为全
收集表是腾讯文档的核心品类之一,也是主要的用户增长来源渠道。作为在重大社会事件中承担社会责任的主要功能,收集表既面临着海量规模的压力考验,也在高速发展的业务进程中遇到了遗留技术债的掣肘。 - 核心服务为C++“翻译”过来的 C++ 风格单体非标 tRPC-Go 服务,代码量较大,不利于多人敏捷协作开发,业务快速迭代时期夹带发布风险高,故障爆炸半径大。 - 业务逻辑耦合严重,接口未做轻重分离,稳定性较差,性能存在瓶颈。 - 业务可观测性存在问题。 在这样的技术背景下,腾讯文档团队对收集表后台服务进行了全面的重构,实现了百万级大收集极限业务场景下提供稳定解决方案的业务收益,完善了底层技术基座,优化了产品体验,实现了开着飞机换引擎的重构效果。
导语:本文将主要从KonaJDK在信创云环境支撑,KonaJDK支持腾讯云产品的能力拓展与定制化以及KonaJDK在大数据场景的优化实践几个方面,介绍KonaJDK对于腾讯云Java业务的支撑与优化。
导语:JDK作为Java应用的基础设施,在云Java生态上的重要性不言而喻。KonaJDK作为Tencent自研JDK, 已经平稳支撑于腾讯云微服务,消息中间件,大数据等核心业务,同时在信创等场景上作为Java业务的基础支撑组件,填补了腾讯云信创场景下JDK组件的空白。 本文将主要从KonaJDK在信创云环境支撑,KonaJDK支持腾讯云产品的能力拓展与定制化以及KonaJDK在大数据场景的优化实践几个方面,介绍KonaJDK对于腾讯云Java业务的支撑与优化。 KonaJDK 信创环境支撑 信创云环境中
运行 Kubernetes 释放了容器的强大功能,但看到更多功能岂不更好?eBPF(扩展 Berkeley 数据包过滤器)是一种…
无论是性能测试环境还是生产环境中,我们经常会遇到响应时间过长的慢调用问题。响应时间是性能评估的一个重要指标,会对最终用户产生直接影响。一个产品是快是慢,响应时间是最直观的感受。其中最让人感到头痛的偶发慢调用问题,算是最难解决的一类问题,那么如何去排查这类问题呢?
国内某大型金融机构通过自建的行业云为各机构、服务商和开发者提供自主可控、安全可信的金融级云平台产品和服务。在全产业加速数字化转型的关键阶段,A金融机构为了更好的支持产品创新和业务拓展,更快地响应客户和市场的需求,不断夯实金融云平台技术底座,保障金融业务安全、稳定运行。
6月25日,在上海召开的KubeCon 2019大会上,腾讯云重磅发布了下一代无服务器的发展形态:Serverless2.0。本文将以 Serverless 的概念、发展、形态、应用及优劣对比展开,进一步介绍腾讯云针对 Serverless 2.0 的形态演进以及发展思考。
如果说核心系统是金融机构业务系统的“心脏”,那么数据库则是“心脏”的“心脏”,业务数据就像流淌在业务系统中的“血液”,拥有一颗健壮的“心脏”是系统高效处理业务和维持正常运转的必备条件。由于金融级数据库技术的高度复杂性,国内金融机构的核心系统长期依赖国外商用数据库产品,金融机构不但无法自主掌控核心系统的“心脏”,而且还需要长期投入高昂的软硬件成本,同时互联网业务的爆发性增长也导致“心脏”压力骤增,成本呈指数级增加。因此,如何实现金融级数据库的自主可控和降本增效,为核心系统平稳换“心”,成为金融行业关注的焦点
对业务来说,完备的应用健康性和数据指标的监控非常重要,通过采集准确的监控指标、配置合理的告警机制,我们能够提前或者尽早发现问题,并做出响应、解决问题,进而保证产品的稳定性,提升用户体验。
日前,泛微协同办公平台e-cology与腾讯云TDSQL完成产品兼容性互认证,本次兼容性互认证经腾讯云与泛微联合测试,得出一致结论:双方产品相互兼容、系统运行稳定、产品体验良好。腾讯云TDSQL与泛微协同办公平台e-cology完成适配后,双方将充分发挥在各自领域的专业优势,坚持以客户实际需求为基础,助力金融机构安全、敏捷地实现数字化转型。 企业级分布式数据库 腾讯云TDSQL 腾讯云企业级分布式数据库TDSQL是腾讯云打造的一款金融级数据库产品,具备数据强一致、金融级高可用、线性水平扩展
李爽 腾讯云应用性能观测产品经理,硕士毕业于卡内基梅隆大学。主要负责腾讯云业务层监控相关产品策划,拥有丰富 toB 全栈研发经验,对应用开发、监控、运维、CICD 等方面有深刻理解。 前言 随着 C 端业务的发展,产品间竞争也愈发激烈,在功能差异化上的空间逐步被挤压,访问性能和体验逐渐成为产品的重要竞争力之一。CDN 应运而生,CDN(Content Delivery Network,即内容分发网络),通过将资源缓存到离用户比较近的节点上,有效地避开互联网上有可能影响传输速度和稳定性的因素,使得我们用户请求
6月,腾讯云数据库TDSQL PG版 Oracle兼容能力以及TDSQL-A两大引擎全新升级,Oracle兼容性和海量数据查询分析能力再上新台阶,并将在公有云全面开放。 TDSQL是腾讯云企业级分布式数据库,旗下涵盖金融级分布式、云原生、分析型等多引擎融合的完整数据库产品体系,提供业界领先的金融级高可用、计算存储分离、数据仓库、企业级安全等能力。 升级后的TDSQL PG版 Oracle兼容能力将进一步降低用户迁移改造成本,全面支持存储过程、Package管理等高级特性,同时支持分布式和集中式两种架构,用户
腾讯云中间件 - 微服务团队产品2021年2月简报: 腾讯云微服务引擎 TSE 邀您内测 消息队列 CKafka 支持跨可用区部署;支持实例升配展示进度;专业版全面放开公网路由接入;专业版现已加入免费试用序列邀您开通体验 腾讯微服务观测台 TSW 新版本发布邀您内测,新增接口、实例维度的监控、统计、异常分析能力;新增 SQL/NoSQL 分析能力;新增服务依赖拓扑清爽过滤能力;支持调用链详情展示堆栈 整理 by 中间件小Q妹 产品最新动态 01 腾讯云微服务引擎 TSE ■ 什么是 TSE
在过去,要以安全、非侵入的方式从整个系统收集遥测数据通常较为困难,我们需要许多产品、应用程序级代理和复杂的配置操作。然而,随着基于 eBPF 的项目数量不断增加,现代基础设施为中心的云原生社区对其产生了极大的兴趣,使得 eBPF 在 2022 年和 2023 年经历了巨大的增长。
导读|过去几年,数据湖能力已经在腾讯内部包括微信视频号、小程序等多个业务大规模落地,数据规模达到 PB至 EB 级别。在此基础上,腾讯自研业务也启动了云原生湖仓能力建设。云原生湖仓架构最大的挑战什么?腾讯云原生湖仓 DLC 从哪些方面着手解决问题?接下来由腾讯云大数据专家工程师于华丽带来相关分享。 云原生湖仓的诞生背景、价值、挑战 当前这个阶段,相信大家对于数据湖,数据仓,湖仓一系列的名词已经不算陌生了,我用最直白、最狭义方式去解释“湖仓”的话,就是数据湖跟数仓存储架构统一。 数据湖最初的需求是,要存储和
可能是大规模企业级的应用,大都是Java编写、并且Java提供了方便的API,可以在不修改Java代码的情况下,直接运行时编辑Java字节码,实现运行时改变程序的默认行为,达到在具体的Java函数上实现延迟、错误等效果。
导语 | 云原生数据湖致力于扩大公有云市场总量:一方面以低成本优势推动客户上云,另一方面云上客户得以低成本撬动更多结构化和非结构化数据的价值,是一场云厂商的自我革命,本文将为大家洞悉云原生数据湖的神秘面纱,并且首次推出腾讯云的云原生数据湖产品。文章作者:于华丽,腾讯TEG数据平台部研发工程师。 一、云上架构大数据平台的挑战和机遇 选择 Cloud 还是 Local 的诸多讨论和实践中,成本一直是绕不开的话题。“公有云太贵了,一年机器就够托管三五年了”,这基本上是刚开始接触公有云的企业,在进行了详细价格
点击上方蓝字每天学习数据库 大咖简介:雷海林,腾讯云数据库技术专家,2007加入腾讯,一直从事支付,数据库领域相关的开发工作。重点研究方向是Linux和数据库内核,在内核编程,后台程序性能优化,分布式数据库方面有丰富经验,目前主要负责分布式数据库TDSQL的研发。 ---- 2019年DTCC中国数据库大会上,腾讯云数据库专家雷海林受邀接受了深度专访。对个人在数据库领域的心路历程,TDSQL智能运维平台架构,以及数据库运维的宝贵经验逐一进行了分享。 采访视频 采访问题 问题1:请您介绍下日常工作重点,以
在基于微服务的云原生架构中,客户端的一次服务调用,会产生包括服务和中间件在内的众多调用关系。对这些大量复杂的调用过程进行追踪,对于微服务的安全性分析、故障定位、以及性能提升等,有着重要的作用。
导语 文章整理了全球软件开发大会QCon《PB级数据秒级分析-腾讯云原生湖仓DLC架构揭秘》。大数据基于海量数据的分析,硬件、存储、计算资源尽量都可以用廉价的资源完成,如何在廉价资源上进行性能优化尤为重要。大数据是一种IO密集型负载,性能优化也首先着眼于IO优化。 开篇:云提供了便利的按需使用方式,最佳实践非常重要 主持人:过去几年,数据湖能力已经在腾讯内部包括微信视频号、小程序等多个业务大规模落地,数据规模达到 PB 至 EB 级别,在此基础上,腾讯自研业务也启动了云原生湖仓能力建设
「WeOpen Insight」是腾源会全新推出的“开源趋势与开源洞见”内容专栏,不定期为读者呈现开源圈内的第一手快讯、优质工具盘点等,洞察开源技术发展的风向标,预见未来趋势。 PART ONE 社区新闻 1、工信部:繁荣国内开源生态,加快建设开源代码托管平台等基础设施 工业和信息化部印发了《“十四五”软件和信息技术服务业发展规划》。《规划》正文的“发展趋势”部分内容指出,开源正重塑软件发展新生态。接下来,工信部在推动我国工业软件的研发创新以及实践应用时,也将把握开源软件发展趋势,应用开源模式构
作者 | 曾响铃 文 | 响铃说(xiangling0815) 对蓬勃发展的计算产业而言,开发者的重要性不言而喻,而用全面的赋能和支持让开发者更好地生长、迈向广阔的未来,已经成为产业生态必须要有的动作。 这一点,以“创未来、享非凡”为主题的鲲鹏开发者创享日成为典型,这个由华为推出的面向鲲鹏计算产业全栈开发者的系列活动,旨在汇聚区域伙伴、客户、高校及科研院所的开发人员,通过前沿的技术思考、纯粹的技术分享、以及真实的动手体验,为开发者提供一个深度探讨与交流的平台,与开发者共创鲲鹏计算产业的未来,共享非凡成长、
雷畅 腾讯云高级工程师。拥有多年云原生/可观测/性能压测领域的研发经验,目前主要负责腾讯云可观测-云压测(PTS)产品研发。 导语 | 作为应用服务的提供者,在面对产品或新功能上线、活动大促(618、双十一)等重大变更时,明明一切看似无懈可击,到了关键时刻,却不知哪个“系统刺客”在偷偷地 kill 您的系统?我们如何才能“底气十足”地保证系统稳定,在这竞争激烈的时代留住“日益挑剔”的用户?正所谓 Testing is believing,这需要测试、测试、再测试! 前言 近日,腾讯云可观测平台-云压测 (P
最近接触的一些项目大搞国产化,著名的关系型数据库厂商都在美国,有Oracle的Oracle和MySQL数据库、IBM的DB2、微软的SQL Server等。今天细说一下国内的数据库厂商。
很高兴今天能有这个机会来到网易大厦来分享腾讯游戏营销技术和 OpenResty 一些应用案例。
2019年4月24日,由中国信息通信研究院主办的首届云原生产业大会(CNIC2019)在北京成功落幕,腾讯云成功入选云原生产业联盟首批理事单位。同时,为推动企业微服务技术应用,中国信息通信研究院组织开展了微服务平台评估,并在会上发布了首批评估结果,腾讯云TSF微服务平台作为首批解决方案平台通过评估。
SSR 顾名思义就是 Server-Side Render, 即服务端渲染。原理很简单,就是服务端直接渲染出 HTML 字符串模板,浏览器可以直接解析该字符串模版显示页面,因此首屏的内容不再依赖 Javascript 的渲染(CSR - 客户端渲染)。
HAR(HTTP Archive)文件是一种记录浏览器与服务器之间网络通信的格式。它包含了在浏览器中加载网页时发生的各种网络请求和响应的详细信息,包括请求和响应头部、请求和响应体、时间戳、Cookie、缓存信息等。
性能问题的本质就是系统资源已经达到了瓶颈,但是请求资源还不够快,无法支撑更多的请求。
在数字化转型的浪潮下,云计算技术已成为企业运营的关键。高灵活性、扩展能力和成本效率也成为当今企业首要考量,顺应行业背景,Docker容器、Serverless架构、微服务和云原生架构等新型技术应势而起,成为了构建现代云基础设施的重要基石。
guolong,云鼎实验室高级研究员,负责云原生安全的研究和腾讯云原生安全架构设计和落地实施。 摘要 容器安全作为云原生安全的重要组成部分,为用户业务的云原生落地提供了基础的安全保障。腾讯云凭借多年来在容器安全以及云原生安全领域的研究和实践运营经验,同时结合腾讯云容器平台 TKE 千万级核心规模容器集群治理经验,提出云原生容器安全体系框架,助力用户安全的实现云原生落地。 概述 容器作为云原生重要的支撑技术,近年来被广泛的认可和应用。根据《中国云原生用户调查报告(2020)》[1]显示,60%以上用户已在
最近几年,国内一线大厂都在积极转 Go,比如腾讯、阿里、华为和百度等等。甚至有不少团队,所有项目都是用 Go 构建的。所以,各个公司对 Go 研发工程师的需求越来越旺盛。 在我看来, Go 语言之所以火热,主要有两方面原因:一方面,Go 本身就是一门非常优秀的语言,有很多核心优势;另一方面,Go 是云时代的语言。 随着云计算平台的逐渐成熟,应用上云已经成为不可逆转的趋势,很多公司都选择将基础架构 / 业务架构云化,甚至所有技术都围绕云来构建。从下面这张云原生技术栈语言组成图中,不难发现,有 63% 的具有统
导语:读书是一生的功课,技术人通过读书实现自我提升,学习优秀技术沉淀。TEG读书会本期特邀腾讯金融云专家工程师李海翔、TEG计费平台部专家工程师雷海林、MySQL数据库专家姜承尧,为大家带来数据库方向好书推荐。来看看技术大牛在读什么,国庆遇见好书,愿本期书单助您更专业。 李海翔,腾讯金融云专家工程师,从事分布式数据库TDSQL研发工作。出版著作:《数据库查询优化器的艺术 原理解析与SQL性能优化》、《数据库事务处理的艺术 事务管理与并发控制》,广受好评。中国人民大学信息学院工程硕士企业导师。 理论类
guolong,云鼎实验室高级研究员,负责云原生安全的研究和腾讯云原生安全架构设计和落地实施。
领取专属 10元无门槛券
手把手带您无忧上云