腾讯技术工程官方号的专栏-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯技术工程官方号的专栏

专栏成员

1119

文章

2588627

阅读量

907

订阅数

服务器开发设计之算法宝典

大数据数据处理数据结构文件存储缓存

作者：lynhlzou，腾讯 IEG 后台开发工程师孙子云：“上兵伐谋，其次伐交，其次伐兵，其下攻城”，最上乘行军打仗的方式是运用谋略，下乘的方式才是与敌人进行惨烈的厮杀。同样的，在程序设计中，解决问题的办法有很多种，陷入到与逻辑进行贴身肉搏的境况实属下下之策，而能运用优秀合理的算法才是”伐谋”的上上之策。算法的思想精髓是值得深入研究和细细品味的，本宝典总结了服务器开发设计过程中涉及到的一些常用算法，试图尽量以简洁的文字和图表来解释和说明其中的思想原理，希望能给大家带来一些思考和启示。思维导图

腾讯技术工程官方号

2021-12-28

1.6K0

基于流计算 Oceanus 和 Elasticsearch Service 构建百亿级实时监控系统

实时监控流计算 Oceanus 数据库数据处理 sql

为什么要构建监控系统作者：龙逸尘，腾讯 CSIG 高级工程师在后移动互联网时代，良好的用户体验是增长的基础，稳定的使用体验就是用户体验的基础。大型的互联网公司，特别是面向 C 端客户的公司，对业务系统稳定性的要求越来越高，因此对线上问题发现和处理的速度要求通常是分钟级的。比如滴滴等出行公司，打车服务停摆 10 分钟都会导致导致乘客、司机大规模投诉，不仅造成经济损失，而且严重平台商誉和用户口碑。大型互联网公司的业务系统都是大规模的分布式系统，各种业务应用和基础组件（数据库、缓存、消息队列等）共同

腾讯技术工程官方号

2021-11-18

7660

分布式消息队列

数据库大数据数据处理数据结构 sql

作者：vincentchma，腾讯 IEG 后台开发工程师一、消息队列的演进分布式消息队列中间件是是大型分布式系统中常见的中间件。消息队列主要解决应用耦合、异步消息、流量削锋等问题，具有高性能、高可用、可伸缩和最终一致性等特点。消息队列已经逐渐成为企业应用系统内部通信的核心手段，使用较多的消息队列有 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、Pulsar 等，此外，利用数据库（如 Redis、MySQL 等）也可实现消息队列的部分基本功能。 1.基于 OS 的

腾讯技术工程官方号

2021-09-28

2K0

基于Flink的高可靠实时ETL系统

flink 数据处理大数据云计算

GIAC（GLOBAL INTERNET ARCHITECTURE CONFERENCE）是长期关注互联网技术与架构的高可用架构技术社区和msup推出的，面向架构师、技术负责人及高端技术从业人员的年度技术架构大会，是中国地区规模最大的技术会议之一。今年的第六届GIAC大会上，在大数据架构专题，腾讯数据平台部实时计算负责人施晓罡发表了《基于Flink的高可靠实时ETL系统》的主题演讲。以下为嘉宾演讲实录：施晓罡毕业于北京大学，获得博士学位，是Apache Flink项目Committer。在SIG

腾讯技术工程官方号

2020-09-01

1.4K0

一款 0 门槛轻松易上手的数据可视化工具

sql 数据库数据可视化 api 数据处理

在职场中有一项共识是：数据驱动业务价值。业务在产品、运营、开发、技术支持、销售等环节都有着大量的数据需求，市面上也出现了很多 BI 可视化工具，但如果能同时具备以下特性，则可以称为一款优秀的 BI 工具：简易接入数据拖拽式生成图表快速计算数据定期发送周报支持移动端+PC 端不用钱结合以上特点，来介绍一款由腾讯 TEG 团队打造的轻量级数据可视化工具——小马 BI。先简单介绍一下这款产品。 0 门槛，想得出来就做的出来通过简单的拖拽就可以使用已接入的数据，编辑你的数据看板，所见即所

腾讯技术工程官方号

2020-04-01

1.4K1

Linux 网络层收发包流程及 Netfilter 框架浅析

linux 数据处理 tcp/ip

本文作者：sivenzhang，腾讯 IEG 测试开发工程师 1. 前言本文主要对 Linux 系统内核协议栈中网络层接收，发送以及转发数据包的流程进行简要介绍，同时对 Netfilter 数据包过滤框架的基本原理以及使用方式进行简单阐述。内容如有理解错误而导致说明错误的地方，还请指正。如存在引用而没有添加说明的，也请及时告知，非常感谢！ 2. 基础网络知识 2.1 网络分层模型 OSI 模型中将网络划分为七层，但在目前实际广泛使用的 TCP/IP 协议框架体系内，我们一般将网络划分为五层，从

腾讯技术工程官方号

2019-12-03

5.6K0

推荐一个直播活动：未来大数据的发展趋势是什么样的？

大数据数据处理云直播网站云计算

随着移动设备、物联网设备的持续增长。流式数据呈现了爆发式增长。同时，越来越多的业务场景对数据处理的实时性有了更高的要求。基于离线批量计算的数据处理平台已经无法满足海量数据的实时处理需求，在这个背景下，各种实时流处理平台应运而生。运用好大数据可以让为消费者提供产品或服务的企业进行更精准的营销；比如我们大家都熟知的海尔，他们在推出某一款新型智能空调时，将广告投放到与会员大数据平台合作的旅游、健康类杂志上，不仅为杂志用户提供购买优惠的双赢模式，还通过用户订阅的杂志来判断用户的特点，从而进行更精准的营销。

腾讯技术工程官方号

2019-09-30

6040

游戏数据埋点二三事

javascript 数据处理 sql 游戏数据库

导语：本文宽泛的梳理了游戏产品数据相关的数据埋点内容，包含游戏数据埋点的一些原则和技巧。主要面向刚刚接触游戏数据业务的新人，希望这篇文章能有所帮助。数据埋点概述 1. 什么是数据埋点数据埋点是一切数据分析的基石。它指在特定的程序功能被触发时，将这个行为记录下来。例如，当玩家登录时，记录登陆行为；在购买时记录订单等。当这些行为不被记录时，数据分析是没有任何基础数据可以分析的。数据埋点就是解决在处理当程序功能被触发时，应该如何记录这个行为并通过合适的渠道上报的问题。 2. 游戏数据的分类按照服务的

腾讯技术工程官方号

2019-08-12

2.9K0

前沿观察 | SageDB：一个自学成才的数据库

编程算法数据库数据处理数据结构

版权声明：本文由腾讯云数据库产品团队整理，页面原始内容来自于db weekly英文官网，若转载请注明出处。翻译目的在于传递更多全球最新数据库领域相关信息，并不意味着腾讯云数据库产品团队赞同其观点或证实其内容的真实性。如果其他媒体、网站或其他任何形式的法律实体和个人使用，必须经过著作权人合法书面授权并自负全部法律责任。不得擅自使用腾讯云数据库团队的名义进行转载，或盗用腾讯云数据库团队名义发布信息。

腾讯技术工程官方号

2019-05-16

6270

腾讯AI Lab解析2017 NIPS三大研究方向，启动教授及学生合作项目

数据处理机器学习大数据

第一部分我们介绍在NIPS上启动与推介的针对教授、学者与学生的共享AI合作项目。第二部分对NIPS探讨的递归神经网络、随机或一阶优化及生成模型等三大研究领域做独家解析。第三部分回顾了NIPS的会议情况，并简介了腾讯AI Lab入选的八篇论文。 NIPS被誉为机器学习和人工智能研究领域最具影响力，也是参会人数最多的的学术会议。腾讯AI Lab去年4月成立，今年第二次参加NIPS，共有8篇文章被录取，含一篇口头报告（Oral）。在所有国内研究机构和高校中，录取论文数仅次于清华大学。此次参会团队由腾讯公司副总

腾讯技术工程官方号

2018-01-30

1.2K0

腾讯信鸽实时精准推送系统的演进与实践 | 2017全球架构师峰会

数据处理大数据

导语 2017年7月7日-8日，ArchSummit全球架构师峰会在深圳召开。ArchSummit全球架构师峰会是InfoQ中国团队推出的面向高端技术管理者、架构师的技术大会，展示新技术在行业应用中的最新实践。腾讯技术工程事业群（TEG）数据平台部的高级工程师甘恒通作为演讲嘉宾，发表了主题为“腾讯信鸽实时精准推送系统的演进与实践”的演讲，以下为现场演讲内容的整理稿。演讲主题：腾讯信鸽实时精准推送系统的演进与实践演讲嘉宾：腾讯TEG数据平台部甘恒通大家好，我是甘恒通，来自腾讯TEG数据平台部。我

腾讯技术工程官方号

2018-01-30

2.1K1

图像内容的「深度」理解及其应用

数据处理数据库人工智能机器学习 apache

本文作者：朱晓龙博士，2015 年毕业于香港大学，主攻计算机视觉和机器学习方向，涉及物体检测，位姿估计，人脸特征点定位，3D 视觉等课题。本科期间参与北京大学智能车环境感知项目，基于 LIDAR 的图像理解工作发表在机器人顶级会议上。2015 年底加入腾讯，在 TEG 内部搜索部工程平台中心参与深度学习平台的开发与应用。长按以下二维码，在腾讯KM上查看本文 Introduction: 交互方式决定未来云对雨，雪对风，晚照对晴空。——《声律启蒙》随着设备的迭代，数据的形态也越来越丰富。PC 时代的键

腾讯技术工程官方号

2018-01-26

2.7K0

腾讯高级工程师甘恒通：信鸽海量移动推送服务构建

本文以海量用户的挑战下做到亿级消息推送为主题，结合信鸽产品的成功经验进行了分享。

腾讯技术工程官方号

2018-01-10

3.5K1

让互联网更快的协议，QUIC 在腾讯的实践及性能优化

本文将主要介绍 QUIC 协议在腾讯内部及腾讯云上的实践和性能优化。

腾讯技术工程官方号

2018-01-10

2.4K0

人类全基因组分析提速10倍的背后：TCS 服务垂直行业的探索

本文介绍了基因测序技术的原理、应用和腾讯云在基因计算领域的解决方案，包括弹性计算、异构加速、算法优化等方面，旨在推动基因测序技术在医疗、农业、遗传等领域的广泛应用。

腾讯技术工程官方号

2018-01-02

1.3K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态