腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯技术工程官方号的专栏

专栏作者

1089

文章

2412010

阅读量

886

订阅数

Linux I/O 那些事儿

unix 缓存 node.js linux vr 视频解决方案

介绍 Linux IO 的一些基本原理。作者：arraywang，腾讯 CSIG 我们先看一张图：这张图大体上描述了 Linux 系统上，应用程序对磁盘上的文件进行读写时，从上到下经历了哪些事情。这篇文章就以这张图为基础，介绍 Linux 在 I/O 上做了哪些事情。文件系统什么是文件系统文件系统，本身是对存储设备上的文件，进行组织管理的机制。组织方式不同，就会形成不同的文件系统。比如常见的 Ext4、XFS、ZFS 以及网络文件系统 NFS 等等。但是不同类型的文件系统标准和接

腾讯技术工程官方号

2021-11-18

1.5K0

企业微信万亿级日志检索系统

日志数据 linux unix

作者：datonli，腾讯 WXG 后台开发工程师背景开发在定位问题时需要查找日志，但企业微信业务模块日志存储在本机磁盘，这会造成以下问题：日志查找效率低下：一次用户请求涉及近十个模块，几十台机器，查找日志需要登录机器 grep 日志文件。这一过程通常需要耗费 10 分钟以上，非常低效；日志保存时间短：单机磁盘存储容量有限，为保存最新日志，清理脚本周期清理旧日志文件腾出磁盘空间，比如：现网一核心存储 7 天日志占用了 90%的磁盘空间，7 天前日志都会被清理，用户投诉因日志被清理而得不到解决；

腾讯技术工程官方号

2021-05-21

1.3K0

快速实现一个分布式定时器

unix 分布式微信消息队列 CMQ 版 kafka

作者：刘若愚，腾讯 WXG 后台开发工程师定时器（Timer）是一种在业务开发中常用的组件，主要用在执行延时通知任务上。本文以笔者在工作中的实践作为基础，介绍如何使用平时部门最常用的组件快速实现一个业务常用的分布式定时器服务。同时介绍了过程中遇到问题的一些解决方案，希望能够给类似场景提供一些解决思路。 1.什么是定时器定时器（Timer）是一种在指定时间开始执行某一任务的工具（也有周期性反复执行某一任务的Timer，我们这里暂不讨论）。它常常与延迟队列这一概念关联。那么在什么场景下我才需要使用定时

腾讯技术工程官方号

2021-03-30

2.3K0

最新开源：3TS腾讯事务处理技术验证系统(下)

unix 编程算法

作者：李海翔，腾讯TEG数据库技术专家近日，中国人民大学-腾讯协同创新实验室正式举行揭牌仪式。据了解，双方已聚焦在数据库基础研究领域进行了多年的前沿产学研合作，以及数据库人才合作培养计划，在推进数据库安全可控的同时面向未来大规模多场景数字化时代进行前沿创新研究储备，其中实验室输出的包括“全时态数据库系统”等多项成果相继被VLDB等国际顶会收录，同时申请获得了多项国家技术专利。在本次实验室揭牌亮相的同时，腾讯与中国人民大学研究团队还开源公布了一项最新合作研究成果——3TS腾讯事务处理技术验证系统。 T

腾讯技术工程官方号

2020-12-03

8040

腾讯与中国人民大学开源最新研究成果：3TS腾讯事务处理技术验证系统

unix mvc mvcc 编程算法 TDSQL MySQL 版

作者：李海翔，腾讯TEG数据库技术专家一个是全球领先的科技公司，一个是中国数据库基础学术研究的摇篮，近日，中国人民大学-腾讯协同创新实验室正式举行揭牌仪式。据了解，双方已聚焦在数据库基础研究领域进行了多年的前沿产学研合作，以及数据库人才合作培养计划，在推进数据库安全可控的同时面向未来大规模多场景数字化时代进行前沿创新研究储备，其中实验室输出的包括“全时态数据库系统”等多项成果相继被VLDB等国际顶会收录，同时申请获得了多项国家技术专利。在本次实验室揭牌亮相的同时，腾讯与中国人民大学研究团队还

腾讯技术工程官方号

2020-11-30

6780

你真的知道怎么实现一个延迟队列吗？

unix rabbitmq 消息队列 CMQ 版云数据库 Redis kafka

作者：xiewang，腾讯 IEG 运营开发工程师前言延迟队列是我们日常开发过程中，经常接触并需要使用到的一种技术方案。前些时间在开发业务需求时，我也遇到了一个需要使用到延迟消息队列的需求场景，因此我也在网上调研了一系列不同的延迟队列的实现方案，在此进行了一个总结并且给大家进行分享。延迟队列定义首先，队列这种数据结构相信大家都不陌生，它是一种先进先出的数据结构。普通队列中的元素是有序的，先进入队列中的元素会被优先取出进行消费；延时队列相比于普通队列最大的区别就体现在其延时的属性上，普通队

腾讯技术工程官方号

2020-10-21

1.6K0

C语言发展史的点点滴滴

unix https 网络安全汇编语言 c 语言

作者：李彦锋，腾讯 IEG 运营开发工程师一直想写一篇关于C语言的文章，里面包含C语言的发展史、创始人等相关事迹。但是却迟迟未写，主要原因是因为：在我看来，这个语言太过于伟大、耀眼。作为一个仅仅使用过C语言的普通开发来说，完全没资格去写。但是，最近在看过一篇丹尼斯.里奇写的《C语言发展史》之后，坚定了我写这篇文章的决心。不是歌功颂德，仅仅是以一种客观的视角去欣赏。 1. C语言发展史任何一种新事物的出现都不是来自于偶然，而是时代所驱使的必然结果。 1.1 C语言有多伟大如果你问我：C语言有多伟大

腾讯技术工程官方号

2020-09-22

7920

Go 如何实现热重启

unix go socket编程编程算法单片机

作者：zhijiezhang，腾讯 PCG 后台开发工程师最近在优化公司框架 trpc 时发现了一个热重启相关的问题，优化之余也总结沉淀下，对 go 如何实现热重启这方面的内容做一个简单的梳理。 1.什么是热重启？热重启（Hot Restart），是一项保证服务可用性的手段。它允许服务重启期间，不中断已经建立的连接，老服务进程不再接受新连接请求，新连接请求将在新服务进程中受理。对于原服务进程中已经建立的连接，也可以将其设为读关闭，等待平滑处理完连接上的请求及连接空闲后再行退出。通过这种方式，可以保

腾讯技术工程官方号

2020-09-10

2.4K0

唯一ID生成算法剖析

ide 分布式 unix 编程算法数据库

引在业务开发中，大量场景需要唯一ID来进行标识：用户需要唯一身份标识；商品需要唯一标识；消息需要唯一标识；事件需要唯一标识…等等，都需要全局唯一ID，尤其是分布式场景下。唯一ID有哪些特性或者说要求呢？按照我的分析有以下特性：唯一性：生成的ID全局唯一，在特定范围内冲突概率极小有序性：生成的ID按某种规则有序，便于数据库插入及排序可用性：可保证高并发下的可用性自主性：分布式环境下不依赖中心认证即可自行生成ID 安全性：不暴露系统和业务的信息一般来说，常用的唯一ID生成方法有这些： UU

腾讯技术工程官方号

2019-10-11

2.8K0

Linux系统——架构浅析

linux node.js unix 编程算法文件存储

导语：掐指一算自己从研究生开始投入到Linux的海洋也有几年的时间，即便如此依然对其各种功能模块一知半解。无数次看了Linux内核的技术文章后一头雾水，为了更系统地更有方法的学Linux，特此记录。历史 1991年，还在芬兰赫尔辛基大学上学的Linus Torvalds在自己的Intel 386计算机上开发了属于他自己的第一个程序，并利用Internet发布了他开发的源代码，将其命名为Linux，从而创建了Linux操作系统，并在同年公开了Linux的代码，从而开启了一个伟大的时代。在之后的将近30

腾讯技术工程官方号

2019-09-25

1.3K0

深入理解计算机系统：进程

unix kill pid process 进程

导语：这是篇读书笔记，每次重读CSAPP都有新的认知，尤其是在进入了后台通道之后才感受到每天和进程打交道的感觉是如此深刻。 0x00 What is Process？ [ system structure ] 进程（Process）经典定义是一个执行中的程序的实例，操作系统对一个正在运行的程序的一种抽象。并发运行，指的是一个进程的指令和另一个进程的指令交错执行。操作系统实现这种交错执行的机制称为上下文切换。线程（Thread）一个进程可以由多个线程的执行单元组成，每个线程都运行在进程的

腾讯技术工程官方号

2019-09-07

1.2K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态