腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯技术工程官方号的专栏

专栏作者

1089

文章

2411959

阅读量

886

订阅数

QQ 浏览器搜索相关性实践

搜索引擎 NLP 服务编程算法

搜索相关性主要指衡量Query和Doc的匹配程度，是信息检索的核心基础任务之一，也是商业搜索引擎的体验优劣最朴素的评价维度之一。本文主要介绍团队在相关性系统、算法方面的实践经历，特别是在看点搜索、搜狗搜索两个大型系统融合过程中，在系统融合、算法融合、算法突破方面的一些实践经验，希望对搜索算法、以及相关领域内的同学有所帮助及启发。作者：jesangliu，腾讯 PCG 应用研究员 1、前言搜索相关性主要指衡量Query和Doc的匹配程度，是信息检索的核心基础任务之一，也是商业搜索引擎的体验优劣最朴素的评价

腾讯技术工程官方号

2023-01-18

9470

鹅厂火热开发框架：trpc-go设计理念介绍

html 文件存储 http android 编程算法

作者：ronaldoliu，腾讯 IEG 后台开发工程师 trpc-go 是目前公司运用广泛的一个开发框架，支持多协议扩展，能够一键集成各种公司现有平台的功能，非常方便。那么它到底是怎么做到的呢？ trpc-go 是目前公司里非常火热的一个开发框架，集成了很多开箱即用的功能，非常方便。trpc-go 代码量不算太多，但是写得还是有点绕，直接阅读可能会比较晕。因此本文主要对 trpc-go 的模块设计进行一个分享，帮助大家构建一个整体视图，后续有需要再针对性的去阅读各模块源码即可。做后端开发的同学肯定接触过

腾讯技术工程官方号

2023-01-11

3.6K6

仅5天注册用户超百万的爆火ChatGPT是什么

监督学习强化学习编程算法 NLP 服务深度学习

作者：qizailiu，腾讯 IEG 应用研究员导读 OpenAI 近期发布聊天机器人模型 ChatGPT，迅速出圈全网。它以对话方式进行交互。以更贴近人的对话方式与使用者互动，可以回答问题、承认错误、挑战不正确的前提、拒绝不适当的请求。高质量的回答、上瘾式的交互体验，圈内外都纷纷惊呼。为什么有如此高的评价？理论支撑是什么？背后的技术原理是什么？待解决的问题和方案有哪些？资本怎么看待这件事？本文的目标是将这些问题详细的给大家讲清楚。 1 ChatGPT 是什么？ ChatGPT 本质是一个应用在对话场景

腾讯技术工程官方号

2022-12-13

1.9K0

深入学习IO多路复用 select/poll/epoll 实现原理

socket编程编程算法 linux

作者：mingguangtu，腾讯 IEG 后台开发工程师 select/poll/epoll 是 Linux 服务器提供的三种处理高并发网络请求的 IO 多路复用技术，是个老生常谈又不容易弄清楚其底层原理的知识点，本文打算深入学习下其实现机制。 Linux 服务器处理网络请求有三种机制，select、poll、epoll，本文打算深入学习下其实现原理。吃水不忘挖井人，最近两周花了些时间学习了张彦飞大佬的文章图解 | 深入揭秘 epoll 是如何实现 IO 多路复用的和其他文章，及出版的书籍《深入理

腾讯技术工程官方号

2022-12-08

2.6K2

十多年前祖传代码重构——从25万到5万行

编程算法单元测试腾讯云测试服务

作者：gillyang，腾讯PCG后台开发工程师近期，我们接管并重构了十多年前的 Query 理解祖传代码，代码量减少80%，性能、稳定性、可观测性都得到大幅度提升。本文将介绍重构过程中系统实现、DIFF修复、coredump 修复等方面的优化经验。 1 背景 1.1 接手 7 月份组织架构调整后，我们组接手了搜索链路中的 Query 理解基础模块，包括本次重构对象 Query Optimizer，负责 query 的分词、词权、紧密度、意图识别。 1.2 为什么重构面对一份10年+历史包袱较重的代码，

腾讯技术工程官方号

2022-12-02

8550

当谈论协程时，我们在谈论什么

汇编语言 python 编程算法单片机

作者：watsonliu，腾讯 WXG 应用开发工程师「什么是协程？」几乎是现在面试的必考题。一方面，Donald E. Knuth 说「子过程是协程的一种特殊表现形式」；另一方面，由于 coroutine 的中文翻译「协程」中包含有「程」字，因此一般会拿来与「进程」、「线程」进行比较，称为「轻量级线程」。第一部分介绍协程的历史；第二部分主要是介绍函数调用和协作式多任务处理，虽然其他介绍协程的文章中也都讲解了函数调用，在本文中，我在构思如何进行分享时，特意使用汇编来实现函数调用 (汇编实现 main

腾讯技术工程官方号

2022-11-21

1K0

「递归」第三季Ep4：深耕源于热爱

编程算法安全网络安全

我们为什么叫「递归」 “递归” (recursion) 是一种在程序设计语言中被广泛使用的算法。它有两大特点，一是调用自己，二是化繁为简。我们当中那些优秀的技术人又何尝不是如此？他们以身作则，用实际行动影响身边的人，规范了流程、提高了效能，使整个团队从中得益。这就是我们「递归」栏目的初心，记录平凡腾讯技术人的不平凡。因为喜欢，她选择成为一名技术工程师；因为热爱，她选择深耕一线坚持了快20年。面对瞬息变化的互联网产业，不断推陈出新的新技术，技术工程师们是怎样让自己保持学习更新的呢？今天我们采访的是一位深

腾讯技术工程官方号

2022-11-11

3720

每个C++工程师都要了解的十个性能陷阱

ide c++javascript node.js 编程算法

作者：jinshang，腾讯 WXG 后台开发工程师如果你让每个 C++工程师列出他们喜欢 C++的原因，那“掌控力”绝对是排在前几的特性。与 go、java 等垃圾回收语言的大道至简、python 等解释语言的小快灵不同，C++最大的魅力就是给予工程师对代码完全的掌控，每个 C++程序员仿佛都是人形编译器，不止要看懂代码表面的逻辑，甚至要知道每行代码对应的汇编指令。优化代码也成了 C++工程师日常必备活动，正所谓“一杯茶，一包烟，一段代码，优化一天”。在经历过无数个性能优化的日日夜夜后，笔者也总结了几个

腾讯技术工程官方号

2022-11-03

1.4K0

虚拟内存 & I/O & 零拷贝

linux socket编程编程算法

作者：mosun，腾讯 PCG 后台开发工程师一、虚拟内存 1.1 虚拟内存引入我们知道计算机由 CPU、存储器、输入/输出设备三大核心部分组成，如下： CPU 运行速度很快，在完全理想的状态下，存储器应该要同时具备以下三种特性：速度足够快：这样 CPU 的效率才不会受限于存储器；容量足够大：容量能够存储计算机所需的全部数据；价格足够便宜：价格低廉，所有类型的计算机都能配备；然而，出于成本考虑，当前计算机体系中，存储都是采用分层设计的，常见层次如下：上图分别为寄存器、高速缓存、主存和磁盘，

腾讯技术工程官方号

2022-09-28

1.9K0

终极 C++避坑指南

c++面向对象编程编程算法

作者：boreholehu，腾讯 WXG 后台开发工程师前言 C++是一门古老的语言，但仍然在不间断更新中，不断引用新特性。但与此同时 C++又甩不掉巨大的历史包袱，并且 C++的设计初衷和理念造成了 C++异常复杂，还出现了很多不合理的“缺陷”。本文主要有 3 个目的：总结一些 C++晦涩难懂的语法现象，解释其背后原因，作为防踩坑之用；和一些其他的编程语言进行比较，列举它们的优劣；发表一些我自己作为 C++程序员的看法和感受。来自 C 语言的历史包袱 C++有一个很大的历史包袱，就是 C 语言

腾讯技术工程官方号

2022-09-08

1.9K0

日理万“机”：业务背后坚守的磐石

运维编程算法

我们为什么叫「递归」 “递归” (recursion) 是一种在程序设计语言中被广泛使用的算法。它有两大特点，一是调用自己，二是化繁为简。我们当中那些优秀的技术人又何尝不是如此？他们以身作则，用实际行动影响身边的人，规范了流程、提高了效能，使整个团队从中得益。这就是我们「递归」栏目的初心，记录平凡腾讯技术人的不平凡。在腾讯有这么一群人，百万台服务器在他们眼中运转，千亿兆数据传输由他们护航——他们是坚守在互联网数据中心（IDC）的运维人。日复一日的例行巡检，天天与硬件设备打交道的他们如何耐住寂寞，并且在其

腾讯技术工程官方号

2022-08-29

4420

腾讯首篇以第一单位入选OSDI的论文，有了！

微信推荐系统编程算法

作为计算机系统界的“奥斯卡”，第16届OSDI（Operating Systems Design and Implementation）已于日前召开，并正式公布了“年度最佳名单”（论文接收名单）。其中，微信团队《Ekko: 超大规模推荐系统的模型低延时更新方案》论文成功入选，这也是腾讯首次以第一单位于该会议发表论文。（论文可点击文末“阅读原文”查看） OSDI是计算机系统领域最顶级的学术会议之一，汇集了全球计算机科学家们对于计算机系统的前瞻性思考。OSDI汇集了来自学术界和工业界的顶尖开发人员和研究人员，

腾讯技术工程官方号

2022-08-26

1.1K0

以小窥大：IO 卡顿探寻苹果文件系统

access ios 编程算法 node.js mac os

作者：rhythmzhang，腾讯 WXG 客户端开发工程师从一个不寻常的 I/O 卡顿入手，发现苹果 APFS 的一个严重 bug。近期有用户反馈频繁遇到了一个奇怪的严重卡顿问题，微信刷朋友圈和查看聊天都非常卡，主线程卡在最普通的 access, rename 等常见 I/O 系统调用，并且经常卡上百 ms，而这种场景的底层接口一般都没干什么大量的 I/O 操作。比如 access 接口也就是获取文件是否存在的轻量操作，正常耗时都只有几十 us 而已，远达不到此时的上百 ms 耗时。一、分析问题寻

腾讯技术工程官方号

2022-08-26

8660

十年护航：7x24小时stand by

运维编程算法云直播 cdn

我们为什么叫「递归」 “递归” (recursion) 是一种在程序设计语言中被广泛使用的算法。它有两大特点，一是调用自己，二是化繁为简。我们当中那些优秀的技术人又何尝不是如此？他们以身作则，用实际行动影响身边的人，规范了流程、提高了效能，使整个团队从中得益。这就是我们「递归」栏目的初心，记录平凡腾讯技术人的不平凡。你对运维的印象是什么？有人说运维是修机器的，有人说是救火队员，更有人说是背锅侠，其实这些都很片面。今天我们采访的是，与我们每个人都息息相关，但我们却又是第一次听过他的名字和岗位的“运维人”

腾讯技术工程官方号

2022-07-27

4120

深入理解完美哈希

hashmap 编程算法 serverless node.js html

作者：foxxiao，腾讯 WXG 后开开发工程师本文对完美 Hash 的概念进行了梳理，通过 Hash 构建步骤来了解它是如何解决 Hash 冲突的，并比较了 Hash 表和完美 Hash 表。下面介绍常见的 Hash 与 Perfect Hash 函数及它们在不同场景的应用。散列函数（英语：Hash function）又称散列算法、哈希函数，是一种从任何一种数据中创建小的数字“指纹”的方法。散列函数把消息或数据压缩成摘要，使得数据量变小，将数据的格式固定下来。该函数将数据打乱混合，重新创建一个叫做散

腾讯技术工程官方号

2022-07-20

2.2K0

编程算法 https 网络安全单片机 c++

作者：kylinkzhang，腾讯 CSIG 后台开发工程师什么是协程我们可以简单的认为：协程就是用户态的线程，但是上下文切换的时机是靠调用方（写代码的开发人员）自身去控制的。同时，协程和用户态线程非常接近，用户态线程之间的切换不需要陷入内核，但部分操作系统中用户态线程的切换需要内核态线程的辅助。下面是一个简单的例子： void A() { cout << 1 << " "; cout << 2 << " "; cout << 3 << " "; } void B() {

腾讯技术工程官方号

2022-07-01

1.6K0

分布式唯一 ID 生成方案浅谈

数据库 sql 分布式 javascript 编程算法

作者：shmilychen，腾讯 IEG 后台开发工程师 1. 分布式唯一 ID 特性在业务开发中，会存在大量的场景都需要唯一 ID 来进行标识。比如，用户需要唯一身份标识；商品需要唯一标识；消息需要唯一标识；事件需要唯一标识等等。尤其是在分布式场景下，业务会更加依赖唯一 ID。分布式唯一 ID 的特性如下：全局唯一：必须保证生成的 ID 是全局性唯一的，这是分布式 ID 的基本要求；有序性：生成的 ID 需要按照某种规则有序，便于数据库的写入和排序操作；可用性：需要保证高并发下的可用性。除了对

腾讯技术工程官方号

2022-06-29

1.7K0

C++异步从理论到实践总览篇

linux 编程算法 c++

作者：fangshen，腾讯 IEG 客户端开发工程师 C++20带来了coroutine特性, 同时新的execution也在提案过程中, 这两者都给我们在C++中解决异步问题带来了新的思路. 但对比其他语言的实现, C++的协程和后续的execution都存在一定的理解和封装成本, 本系列的分享我们将围绕基本的原理, 相应的封装, 以及剥析优秀的第三方实现, 最终结合笔者framework落地的情况来展开. 1. 纠结的开篇之前设计我们游戏用的c++框架的时候, 刚好c++20的coroutine已经

腾讯技术工程官方号

2022-06-08

1.2K0

异步编程指北

编程算法压力测试云数据库 Redis 消息队列 CMQ 版 kafka

作者：michaeywang，腾讯 IEG 运营开发工程师同步、异步，并发、并行、串行，这些名词在我们的开发中会经常遇到，这里对异步编程做一个详细的归纳总结，希望可以对这方面的开发有一些帮助。 1 几个名词的概念多任务的时候，才会遇到的情况，如：同步、异步，并发、并行。 1.1 理清它们的基本概念并发：多个任务在同一个时间段内同时执行，如果是单核心计算机，CPU 会不断地切换任务来完成并发操作。并行：多任务在同一个时刻同时执行，计算机需要有多核心，每个核心独立执行一个任务，多个任务同时执行，不需要

腾讯技术工程官方号

2022-05-31

9030

C++17 在业务代码中最好用的十个特性

c++gcc 编程算法

作者：jinshang，腾讯 WXG 后台开发工程师自从步入现代 C++时代开始，C++语言标准形成了三年一个版本的惯例：C++11 标志着现代 C++的开端，C++14 在 11 的基础上查缺补漏，并未加入许多新特性，而 C++17 作为 C++11 后的第一个大版本，标志着现代 C++逐渐走向成熟。WXG 编译器升级到 gcc7.5 已有一段时间，笔者所在项目组也已经将全部代码升级到 C++17。在使用了 C++17 一年多之后，笔者总结了 C++17 在业务代码中最好用的十个特性。注 1：本文只

腾讯技术工程官方号

2022-05-25

2.3K0

点击加载更多

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态