腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
腾讯技术工程官方号的专栏
专栏作者
举报
1092
文章
2430155
阅读量
889
订阅数
订阅专栏
申请加入专栏
全部文章（999+）
编程算法（190）
微信（116）
数据库（114）
大数据（97）
深度学习（90）
人工智能（88）
sql（83）
网络安全（83）
神经网络（69）
开源（63）
https（59）
安全（55）
机器学习（52）
运维（52）
其他（42）
linux（42）
小程序（42）
存储（41）
微服务（41）
模型（41）
数据（40）
游戏（37）
腾讯（37）
c++（36）
node.js（35）
分布式（35）
缓存（34）
api（33）
数据结构（32）
http（30）
云数据库 SQL Server（29）
网站（28）
云直播（27）
云计算（27）
物联网（25）
javascript（24）
go（24）
ide（23）
图像处理（23）
腾讯云测试服务（22）
企业（22）
NLP 服务（21）
容器（20）
python（19）
git（19）
java（18）
tcp/ip（18）
腾讯云开发者社区（18）
系统（18）
android（17）
打包（17）
serverless（17）
推荐系统（17）
函数（17）
小程序·云开发（16）
html（15）
云数据库 Redis（15）
github（15）
机器人（15）
数据处理（15）
程序员（15）
实践（15）
强化学习（14）
单元测试（14）
数据分析（14）
ios（13）
TDSQL MySQL 版（13）
kubernetes（13）
kafka（13）
架构（13）
消息队列 CMQ 版（12）
优化（12）
费用中心（11）
unix（11）
黑客（11）
安全漏洞（11）
架构设计（11）
设计（11）
apache（10）
文件存储（10）
渲染（10）
数据安全（10）
devops（10）
自动化（10）
rpc（10）
uml（10）
react（9）
css（9）
json（9）
单片机（9）
云+未来（9）
区块链（8）
访问管理（8）
TAPD 敏捷项目管理（8）
文字识别（8）
数据迁移（8）
面向对象编程（8）
服务（8）
研发（8）
原理（8）
postgresql（7）
容器镜像服务（7）
机器翻译（7）
腾讯计费（7）
压力测试（7）
hadoop（7）
图像识别（7）
监督学习（7）
socket编程（7）
学习方法（7）
对象（7）
视频（7）
负载均衡（6）
搜索引擎（6）
SSL 证书（6）
腾讯云区块链服务平台 TBaaS（6）
医疗（6）
spark（6）
正则表达式（6）
openstack（6）
5g（6）
编程（6）
产品（6）
工作（6）
开发（6）
框架（6）
内存（6）
网络（6）
mac os（5）
c 语言（5）
php（5）
负载均衡缓存（5）
云函数（5）
VPN 连接（5）
工业物联（5）
自动化测试（5）
cdn（5）
ddos（5）
迁移学习（5）
nat（5）
特征工程（5）
sdk（5）
bug（5）
chatgpt（5）
编码（5）
工具（5）
互联网（5）
开发者（5）
日志（5）
性能（5）
私有网络（4）
人脸识别（4）
数据挖掘（4）
vue.js（4）
ajax（4）
汇编语言（4）
nosql（4）
nginx（4）
黑石物理服务器（4）
知识图谱（4）
腾讯乐享（4）
webpack（4）
jdk（4）
pytorch（4）
udp（4）
kernel（4）
系统架构（4）
fpga（4）
任务调度（4）
虚拟化（4）
云开发（4）
腾讯会议（4）
接口测试（4）
es（4）
腾讯云（4）
aigc（4）
高性能（4）
流量（4）
入门（4）
算法（4）
线程（4）
云服务器（3）
对象存储（3）
蓝鲸平台（3）
语音识别（3）
自动驾驶（3）
android studio（3）
硬件开发（3）
短视频（3）
NAT 网关（3）
mongodb（3）
混合云解决方案（3）
数据库解决方案（3）
金融（3）
svg（3）
互联网金融（3）
爬虫（3）
卷积神经网络（3）
dns（3）
npm（3）
敏捷开发（3）
rabbitmq（3）
无监督学习（3）
windows（3）
数据可视化（3）
canvas（3）
sdn（3）
flutter（3）
flink（3）
大数据存储（3）
embedding（3）
gpt（3）
变量（3）
编译（3）
部署（3）
程序（3）
低代码（3）
二维码（3）
公众号（3）
基础（3）
脚本（3）
进程（3）
内核（3）
前端（3）
数据中心（3）
搜索（3）
索引（3）
效率（3）
性能优化（3）
压缩（3）
音频（3）
c#（2）
lua（2）
ecmascript（2）
arm（2）
oracle（2）
access（2）
mvc（2）
svn（2）
centos（2）
apt-get（2）
日志服务（2）
腾讯云可观测平台（2）
命令行工具（2）
云数据库 MongoDB（2）
API 网关（2）
腾讯git代码托管（工蜂）（2）
cci 持续集成（2）
物联网通信（2）
内容理解（2）
专有云（2）
日志数据（2）
yarn（2）
html5（2）
无人驾驶（2）
ssh（2）
hive（2）
hashmap（2）
决策树（2）
unity（2）
zookeeper（2）
grep（2）
gradle（2）
信息流（2）
mqtt（2）
angel（2）
迁移（2）
dart（2）
raft（2）
腾讯极客挑战赛（2）
实时监控（2）
前端性能监控（2）
服务网格（2）
验证码（2）
流计算 Oceanus（2）
腾讯问卷（2）
elasticsearch（2）
gpu（2）
it（2）
openai（2）
protobuf（2）
redis（2）
table（2）
编程语言（2）
编译器（2）
测试（2）
插件（2）
服务器（2）
管理（2）
行业（2）
后台（2）
后台开发（2）
技巧（2）
集群（2）
监控（2）
教程（2）
接口（2）
客户端（2）
连接（2）
漏洞（2）
论文（2）
配置（2）
全栈（2）
软件（2）
手机（2）
统计（2）
网关（2）
协议（2）
硬件（2）
源码（2）
重构（2）
字符串（2）
云点播（1）
云 API（1）
弹性伸缩（1）
DNS 解析 DNSPod（1）
数字货币（1）
tensorflow（1）
objective-c（1）
iphone（1）
perl（1）
bash（1）
regex（1）
typescript（1）
webview（1）
嵌入式（1）
sqlite（1）
memcached（1）
matlab（1）
lucene/solr（1）
analyzer（1）
bash 指令（1）
mapreduce（1）
容器服务（1）
批量计算（1）
实时音视频（1）
互动直播（1）
弹性网卡（1）
消息队列 CKafka 版（1）
数据加密服务（1）
语音合成（1）
腾讯移动推送（1）
es 2（1）
云推荐引擎（1）
视频处理（1）
高性能计算（1）
数据备份（1）
电商（1）
通用教育（1）
政务云专区（1）
vr 视频解决方案（1）
智慧零售（1）
出行（1）
智能硬件（1）
微信生态上云方案（1）
微信小程序音视频（1）
electron（1）
eslint（1）
express（1）
云数据库 MySQL（1）
云联网（1）
babel.js（1）
jvm（1）
yum（1）
jdbc（1）
ftp（1）
二叉树（1）
aop（1）
scrapy（1）
gcc（1）
模式识别（1）
lamp（1）
hbase（1）
postcss（1）
nest（1）
webgl（1）
processing（1）
图片加速（1）
物联网开发平台（1）
物联网设备身份认证（1）
机器学习平台（1）
聚类算法（1）
分类算法（1）
mvcc（1）
tdsql-c（1）
ascii（1）
rust（1）
功能测试（1）
性能测试（1）
黑盒测试（1）
etcd（1）
腾讯云前端性能优化大赛（1）
tencentos tiny（1）
TencentOS Server（1）
腾讯云图数据可视化（1）
智能创作（1）
联邦学习（1）
应急响应服务（1）
Elasticsearch Service（1）
腾讯云数据仓库 TCHouse（1）
移动推送（1）
图像搜索（1）
智能客服机器人（1）
项目管理（1）
acm（1）
adapter（1）
amp（1）
block（1）
chat（1）
clickhouse（1）
cpu（1）
db（1）
discord（1）
dos（1）
embed（1）
get（1）
google（1）
input（1）
ip（1）
kill（1）
live（1）
mysql（1）
nlp（1）
olap（1）
overflow（1）
pid（1）
pipeline（1）
process（1）
prompt（1）
stack（1）
system（1）
tcp（1）
token（1）
ui（1）
web（1）
百度（1）
闭包（1）
笔记（1）
编辑器（1）
遍历（1）
表单（1）
并发编程（1）
产品设计（1）
存储技术（1）
递归（1）
地图（1）
动画（1）
动效（1）
分布式事务（1）
分布式锁（1）
分布式系统（1）
公有云（1）
混合云（1）
集合（1）
镜像（1）
科技（1）
可视化（1）
跨平台（1）
链表（1）
量化（1）
路由（1）
敏捷（1）
排序（1）
软件架构（1）
设计模式（1）
事件（1）
事务（1）
数据仓库（1）
数组（1）
调试（1）
同步（1）
通信（1）
消息队列（1）
序列化（1）
异常（1）
语法（1）
云原生（1）
指针（1）
终端（1）
最佳实践（1）
LLM（1）
腾讯混元大模型（1）
搜索文章
搜索
搜索
关闭
十年前的微信消息收发架构居然是这样子的
存储
微信
服务器
架构
手机
2023 年，微信及 WeChat 的 DAU（月活用户）达到 13.4 亿，微信已经是很多人工作、生活中不可或缺的一个环节。从 2011 年 1 月 21 日上线至今，微信已经走过了 13 个年头，其背后的技术基座与架构也发生了巨大的变化。 这些变化背后，所折射的也正是中国互联网高速发展的黄金年代。腾讯云开发者社区特别策划了「十年前的技术」系列，带大家回顾那些明星项目背后最初的技术架构。好的架构是生长出来的，却也少不了良好的设计，愿各位读者都能从中获得启发，找到力量。
腾讯技术工程官方号
2024-04-17
201
0
轻松上手的LangChain学习说明书
工具
函数
模型
数据
存储
如今各类AI模型层出不穷，百花齐放，大佬们开发的速度永远遥遥领先于学习者的学习速度。。为了解放生产力，不让应用层开发人员受限于各语言模型的生产部署中..LangChain横空出世界。
腾讯技术工程官方号
2024-03-22
686
0
分布式事务概述与项目实战
数据
存储
分布式事务
事件
事务
随着计算能力的提升、互联网的兴起、数据的分布和存储需求、容错性和可用性的要求、业务的分布和协同需求以及云计算和大数据技术的发展，分布式系统变得越来越重要，并在各个领域得到广泛应用。分布式系统由于机器宕机、网络异常、消息丢失、消息乱序、数据错误、不可靠的 TCP、存储数据丢失等原因面临一系列挑战，本文重点讲述分布式系统面临的挑战之一数据一致性问题。
腾讯技术工程官方号
2024-01-10
314
0
热门通讯软件Discord万亿级消息存储架构
存储
discord
架构
软件
数据
Discord 在创建之初采用的是一个单副本集的 MongoDB，没有使用 MongoDB 的分片，他们给出的理由是当时 MongoDB 分片很难用，而且不够稳定（这里就不去深究了）。消息数到达一亿条时，RAM 里已经存不下这么数据和索引，MongoDB 的延时开始变得不可控。
腾讯技术工程官方号
2023-10-23
518
0
微信实验平台：全面拥抱湖仓时代
存储
微信
链表
数据
优化
对比太过朴素的 Hive，兼容性不足的 THive，Iceberg 湖格式带来了极致的灵活性，给我们业务实现方案带来了新的优雅的解决思路。当前实验平台增量存储预算都已经收敛在 Iceberg 库上(20PB+)，会逐步迁移“年久失修”的 THive，全面拥抱湖仓格式。
腾讯技术工程官方号
2023-10-19
391
0
春节微信访问突发，存储业务如何平稳度过？
存储
运维
微信
监控
系统
存储业务里面有很多访问突发的业务，其中微信就是一个典型的业务。微信承担了亿万用户的图片、视频和文件的收发，遇到特殊热点事件或者重大节假日，访问次数会突发10倍以上的增长。微信是一个海量的业务，平时机器的负载有限，实际运营中不可能预留10倍的Buffer，那么遇到传统节日春节的时候，我们是怎么平稳度过的呢？
腾讯技术工程官方号
2023-07-26
257
0
消息队列二十年
存储
服务
设计
数据
消息队列
2003 至今有很多优秀的消息队列诞生，其中就有被大家所熟知的就是 kafka、阿里自研的 rocketmq、以及后起之秀 pulsar。首先我们先来了解一下每一时期消息队列诞生的背景以及要解决的核心问题是什么？
腾讯技术工程官方号
2023-07-26
348
0
微信万亿数据仓库架构设计与实现
存储
微信
架构设计
数据
数据仓库
安全业务的核心逻辑在安全策略中实现。整个的策略开发流程包括特征数据的收集，安全策略的编写实现，和策略的反馈评估。其中特征数据的收集是必不可少的环节，数据的质量将直接影响安全策略的效果。
腾讯技术工程官方号
2023-07-15
290
0
如何设计一个海量任务调度系统
存储
任务调度
部署
设计
系统
在日常开发中会经常遇到一些需要异步定时执行的业务诉求，典型的使用场景如：超时未支付订单关单、每隔 2h 更新好友排行榜、3.22 日 17 点《xx》剧上线等。目前业务侧多基于以下思路来快速搭建一个调度系统，mysql 或者 redis 队列存储待执行任务，通过 crontab 定时触发应用完成“捞取、计算、执行等操作”。不难看出存在几类亟待解决问题：
腾讯技术工程官方号
2023-07-15
826
0
Elasticsearch核心应用场景-日志优化实践
存储
elasticsearch
日志
实践
优化
日志领域是Elasticsearch（ES）最重要也是规模最大的应用场景之一。这得益于 ES 有高性能倒排索引、灵活的 schema、易用的分布式架构，支持高吞吐写入、高性能查询，同时有强大的数据治理生态、端到端的完整解决方案。但原生 ES 在高吞吐写入、低成本存储、高性能查询等方面还有非常大的优化空间，本文重点剖析腾讯云大数据 ES 团队在这三个方面的内核增强优化。
腾讯技术工程官方号
2023-07-15
541
0
深入浅出 ClickHouse 物化视图
数据库
存储
clickhouse
table
数据
数据库查询语言（query language）是数据库管理系统（DBMS）提供给用户和数据库交互的工具，查询语言分为三类 [^1]：
腾讯技术工程官方号
2023-07-15
1.4K
0
大牛书单 | 缓存系列好书推荐
存储
缓存
数据
系统
性能
在计算中，缓存是一种存储数据的硬件或软件组件，以便可以更快地满足未来对该数据的请求；存储在缓存中的数据可能是早期计算的结果或存储在其他地方的数据副本。当可以在缓存中找到请求的数据时发生缓存命中，而当找不到时发生缓存未命中。缓存命中是通过从缓存中读取数据来提供的，这比重新计算结果或从较慢的数据存储中读取要快；因此，缓存可以处理的请求越多，系统执行的速度就越快。 为了具有成本效益并能够有效地使用数据，缓存必须相对较小。尽管如此，缓存已经在许多计算领域证明了自己，因为典型的计算机应用程序访问具有高度局部引用的数据
腾讯技术工程官方号
2023-04-01
592
0
QQ音乐高可用架构体系
微服务
api
存储
分布式
在分布式系统建设的过程中，我们思考的重点不是避免故障，而是拥抱故障，通过构建高可用架构体系来获得优雅应对故障的能力。QQ音乐高可用架构体系包含三个子系统：架构、工具链和可观测性。
腾讯技术工程官方号
2023-03-08
1.9K
0
ClickHouse 查询优化详细介绍
https
网络安全
文件存储
存储
sql
作者：oliverdding，腾讯 CSIG 测试开发工程师 你想要的 ClickHouse 优化，都在这里。 ClickHouse 是 OLAP（Online analytical processing）数据库，以速度见长[1]。ClickHouse 为什么能这么快？有两点原因[2]： 架构优越 列式存储 索引 数据压缩 向量化执行 资源利用 关注底层细节 但是，数据库设计再优越也拯救不了错误的使用方式，本文以 MergeTree 引擎家族为例讲解如何对查询优化。 ClickHouse 查询执行过程 ⚠️
腾讯技术工程官方号
2023-01-09
1.9K
1
腾讯财付通会计核算系统原理与架构
数据库
sql
存储
任务调度
作者：shuangchen，腾讯 FiT 线后台开发工程师 财付通作为业界领先的第三方支付公司，一直致力于为互联网用户和各类企业提供安全便捷的在线支付服务，本文将介绍财付通如何通过会计核算系统来保障财付通亿万资金安全。 1. 背景 1.1. 财付通资金账务系统介绍 1.1.1. 账户体系 财付通作为业界领先的第三方支付公司，一直致力于为互联网用户和各类企业提供安全便捷的在线支付服务。财付通为用户或商户创建支付账户，用于承载用户或商户资金余额以及余额变动情况。财付通资金账务系统中，按账户属性分为现金账户、交易
腾讯技术工程官方号
2022-12-29
2.9K
0
Git 全功能介绍
git
github
开源
存储
svn
作者：xqkuang，PCG 前端开发工程师 Git 历史和现状 Git 是 Linux 作者 Linus 的另一个作品。2002 年他还在使用 Bitkeeper 作为 Linux 内核的版本管理，但因为它是 Copyright 有版权的软件备受质疑，然后 Andrew Tridgell 对 Bitkeeper 进行逆向工程，导致 BitMover 要回收 Linux 开发者的 Bitkeeper 的免费使用权，Linus 一怒之下花了 10 天写出了 Git。 名字的意思是：egotistical ba
腾讯技术工程官方号
2022-04-07
912
0
消息队列背后的设计思想
存储
rabbitmq
数据库
大数据
数据结构
作者：jaydenwen，腾讯 PCG 后台开发工程师 消息队列也通常称为消息中间件，提到消息队列，大部分互联网人或多或少都听过该名词。对于后端工程师而言，更是日常开发中必备的一项技能。随着大数据时代的到来，apache 旗下的 kafka 一度成为消息队列的代名词，提起消息队列大家自然而然就想到了 kafka。近而网上有太多太多介绍消息队列 kafka 功能或者内部实现的文章。 然而消息队列本身是工程领域内一种解决问题的通用方案。它的背后有着一些通用的设计思想和经典模型，这些是消息队列的精髓和灵魂。
腾讯技术工程官方号
2021-08-23
526
0
Redis vs Tendis：冷热混合存储版架构揭秘
缓存
云数据库 Redis
存储
数据库
数据结构
作者：jingjunli，腾讯 IEG 后台开发工程师 Redis 作为高性能缓存被广泛应用到各个业务, 比如游戏的排行榜, 分布式锁等场景。经过在 IEG 的长期运营, 我们也遇到 Redis 一些痛点问题, 比如内存占用高, 数据可靠性差, 业务维护缓存和存储的一致性繁琐。由 腾讯互娱 CROS DBA 团队 & 腾讯云数据库团队联合研发的 Tendis 推出了: 缓存版 、 混合存储版 和 存储版 三种不同产品形态, 针对不同的业务需求, 本文主要介绍 混合存储版 的整体架构, 并且详细揭秘内部
腾讯技术工程官方号
2021-04-21
2.9K
2
MySQL 深入学习总结
存储
缓存
TDSQL MySQL 版
数据库
sql
作者：yandeng，腾讯 PCG 应用开发工程师 1.数据库基础 1.1 MySQL 架构 和其它数据库相比，MySQL 有点与众不同，它的架构可以在多种不同场景中应用并发挥良好作用。主要体现在存储引擎的架构上，插件式的存储引擎架构将查询处理和其它的系统任务以及数据的存储提取相分离。这种架构可以根据业务的需求和实际需要选择合适的存储引擎，各层介绍： 1.1.1 连接层 最上层是一些客户端和连接服务，包含本地 sock 通信和大多数基于客户端/服务端工具实现的类似于 tcp/ip 的通信。主要完成
腾讯技术工程官方号
2021-03-25
978
0
腾讯关系型数据库达成“双百”里程碑——6大企业级MySQL特性全面解析
云数据库 SQL Server
数据安全
存储
数据库
腾讯关系型数据库-企业级MySQL（原CDB，腾讯云TencentDB for MySQL）达成了 百万核 和 百PB 的“双百”里程碑！存储规模同比增速高达 80% ，连续两年在全球 TOP5 公有云厂商中增速位列第一！作为腾讯云规模最大的数据库产品，在11月携手腾讯云数据库入选Gartner云数据库管理系统魔力象限，意味着腾讯云数据库进入全球顶级序列！截止目前，已经为Bilibili、水滴筹、小红书、微盟、富途证券、云集、畅游等多家大客户提供服务，支撑了618、双11等大型活动的突发保障，实现了1
腾讯技术工程官方号
2020-12-10
1.1K
0
点击加载更多
社区活动
RAG七天入门训练营
鹅厂大牛手把手带你上手实战
立即学习
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档