腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯技术工程官方号的专栏

专栏作者

1092

文章

2429090

阅读量

889

订阅数

万字图文讲透数据库缓存一致性问题

缓存云数据库 Redis apache 数据库 sql

作者：jaskeylin，腾讯 CSIG 后台开发工程师缓存合理使用确提升了系统的吞吐量和稳定性，然而这是有代价的。这个代价便是缓存和数据库的一致性带来了挑战，本文将针对最常见的 cache-aside 策略下如何维护缓存一致性彻底讲透。在真实的业务场景中，我们的业务的数据——例如订单、会员、支付等——都是持久化到数据库中的，因为数据库能有很好的事务保证、持久化保证。但是，正因为数据库要能够满足这么多优秀的功能特性，使得数据库在设计上通常难以兼顾到性能，因此往往不能满足大型流量下的性能要求，像是 MyS

腾讯技术工程官方号

2022-11-18

5600

大牛书单 | Redis好书推荐

云数据库 Redis 数据库 sql 网站

2007年，他和朋友一起创建了一个网站，为了解决这个网站的负载问题，他自己定制了一个数据库——这个便是Redis。这位意大利程序员是萨尔瓦托勒·桑菲利波(Salvatore Sanfilippo)，他被称为Redis之父，更广为人知的名字是Antirez。 REmote DIctionary Server(Redis) 是一个开源的使用 ANSI C 语言编写、遵守 BSD 协议、支持网络、可基于内存、分布式、可选持久性的键值对(Key-Value)存储数据库，并提供多种语言的 API。Redis 通常被称

腾讯技术工程官方号

2022-11-07

1.1K0

Redis 知识总结

云数据库 Redis node.js 数据安全

作者：leobhao，腾讯 CSIG 研发工程师。 1. Redis 概览 Redis 和 memcache 的区别，Redis 支持的数据类型应用场景 redis 支持的数据结构更丰富(string，hash，list，set，zset)。memcache 只支持 key-value 的存储； redis 原生支持集群，memcache 没有原生的集群模式。 2. Redis 单线程模型 redis 单线程处理请求流程 redis 采用 IO 多路复用机制来处理请求，采用 reactor IO 模型，处

腾讯技术工程官方号

2022-06-14

5210

异步编程指北

编程算法压力测试云数据库 Redis 消息队列 CMQ 版 kafka

作者：michaeywang，腾讯 IEG 运营开发工程师同步、异步，并发、并行、串行，这些名词在我们的开发中会经常遇到，这里对异步编程做一个详细的归纳总结，希望可以对这方面的开发有一些帮助。 1 几个名词的概念多任务的时候，才会遇到的情况，如：同步、异步，并发、并行。 1.1 理清它们的基本概念并发：多个任务在同一个时间段内同时执行，如果是单核心计算机，CPU 会不断地切换任务来完成并发操作。并行：多任务在同一个时刻同时执行，计算机需要有多核心，每个核心独立执行一个任务，多个任务同时执行，不需要

腾讯技术工程官方号

2022-05-31

9080

认识 MySQL 和 Redis 的数据一致性问题

缓存数据库 sql 压力测试云数据库 Redis

作者：sinxu，腾讯 CSIG 后台开发工程师 1. 什么是数据的一致性 “数据一致”一般指的是：缓存中有数据，缓存的数据值 = 数据库中的值。但根据缓存中是有数据为依据，则”一致“可以包含两种情况：缓存中有数据，缓存的数据值 = 数据库中的值（需均为最新值，本文将“旧值的一致”归类为“不一致状态”）缓存中本没有数据，数据库中的值 = 最新值（有请求查询数据库时，会将数据写入缓存，则变为上面的“一致”状态） ”数据不一致“：缓存的数据值 ≠ 数据库中的值；缓存或者数据库中存在旧值，导致其他线程

腾讯技术工程官方号

2021-11-09

1.1K0

指标统计：基于流计算 Oceanus(Flink) 实现实时 UVPV 统计

kafka https 网络安全云数据库 Redis

作者：吴云涛，腾讯 CSIG 高级工程师导语 | 最近梳理了一下如何用 Flink 来实现实时的 UV、PV 指标的统计，并和公司内微视部门的同事交流。然后针对该场景做了简化，并发现使用 Flink SQL 来实现这些指标的统计会更加便捷。一、解决方案描述 1.1 概述本方案结合本地自建 Kafka 集群、腾讯云流计算 Oceanus（Flink)、云数据库 Redis 对博客、购物等网站 UV、PV 指标进行实时可视化分析。分析指标包含网站的独立访客数量（UV ）、产品的点击量（PV）、转化率（

腾讯技术工程官方号

2021-11-05

8880

这篇Redis文章，图灵看了都说好

云数据库 Redis 编程算法 node.js 数据库数据安全

作者：lunnzhang，腾讯 CDG 后台开发工程师。 2007 年，他和朋友一起创建了一个网站。为了解决这个网站的负载问题，他自己定制了一个数据库。2009 年开发的，这个是 Redis。这位意大利程序员是萨尔瓦托勒·桑菲利波(Salvatore Sanfilippo)，他被称为Redis之父，更广为人知的名字是Antirez。一、Redis简介 REmote DIctionary Server(Redis) 是一个开源的使用 ANSI C 语言编写、遵守 BSD 协议、支持网络、可基于内存、分

腾讯技术工程官方号

2021-06-30

6530

Redis vs Tendis：冷热混合存储版架构揭秘

缓存云数据库 Redis 存储数据库数据结构

作者：jingjunli，腾讯 IEG 后台开发工程师 Redis 作为高性能缓存被广泛应用到各个业务, 比如游戏的排行榜, 分布式锁等场景。经过在 IEG 的长期运营, 我们也遇到 Redis 一些痛点问题, 比如内存占用高, 数据可靠性差, 业务维护缓存和存储的一致性繁琐。由腾讯互娱 CROS DBA 团队 & 腾讯云数据库团队联合研发的 Tendis 推出了: 缓存版、混合存储版和存储版三种不同产品形态, 针对不同的业务需求, 本文主要介绍混合存储版的整体架构, 并且详细揭秘内部

腾讯技术工程官方号

2021-04-21

2.9K2

你真的知道怎么实现一个延迟队列吗？

unix rabbitmq 消息队列 CMQ 版云数据库 Redis kafka

作者：xiewang，腾讯 IEG 运营开发工程师前言延迟队列是我们日常开发过程中，经常接触并需要使用到的一种技术方案。前些时间在开发业务需求时，我也遇到了一个需要使用到延迟消息队列的需求场景，因此我也在网上调研了一系列不同的延迟队列的实现方案，在此进行了一个总结并且给大家进行分享。延迟队列定义首先，队列这种数据结构相信大家都不陌生，它是一种先进先出的数据结构。普通队列中的元素是有序的，先进入队列中的元素会被优先取出进行消费；延时队列相比于普通队列最大的区别就体现在其延时的属性上，普通队

腾讯技术工程官方号

2020-10-21

1.6K0

翻越缓存的三座大山

缓存分布式存储云数据库 Redis 数据库

作者：lynzou，腾讯 CSIG 行业研究员前言在互联网和移动互联网两波浪潮的推动下，存储技术有了飞速发展。移动互联网用户在过去十年增长了 10 倍，用户的增长带动了数据量的指数级增长，因为激烈的市场竞争，企业和用户对应用程序的响应性能要求越来越高，在完美应对庞大的用户规模和海量数据集的同时保证优秀的产品体验，是数据库面临的挑战。在机械硬盘普及的时代，企业需要通过缓存技术加速数据的访问，在 SSD 存储介质普及后，企业需要缓存技术支撑高并发和大吞吐，通过引入分布式缓存方案，提升应用程序性能，消除

腾讯技术工程官方号

2020-07-01

1.1K0

是什么能让 APP 快速精准定位到我们的位置？

编程算法云数据库 Redis

本文作者：smallyang，腾讯 IEG 开发工程师什么是geohash？它的原理是什么？它帮助我们解决了哪些痛点，本文为你娓娓道来。本文包含以下内容，阅读完需要约10分钟：我们日常生活中遇到哪些定位的场景简单复习一下经纬度 geohash原理解析 geohash存在的边界问题如何解决边界问题计算两点距离的计算 geohash 在redis中的实现我们日常生活中遇到哪些定位的场景我们上下班经常会用APP打车和共享单车，下面2张图，应该都很熟悉，打开定位，查找我附近的车，那么，这

腾讯技术工程官方号

2019-11-09

1.5K0

redis实践及思考

云数据库 Redis 编程算法 http 分布式

导语：当面临存储选型时是选择关系型还是非关系型数据库？如果选择了非关系型的redis，redis常用数据类型占用内存大小如何估算的？redis的性能瓶颈又在哪里？背景前段时间接手了一个业务，响应时间达到10s左右。阅读源码后发现，每一次请求都是查询多个分表数据（task1,task2….），然后再join其他表(course,teacher..)，时间全部花在了大量磁盘I/O上。脑袋一拍，重构，上redis！为什么选择redis 拍脑袋做技术方案肯定是不行的，得用数据和逻辑说服别人才可以。时延

腾讯技术工程官方号

2019-08-22

1.1K0

腾讯开源 DCache，分布式 NoSQL 存储系统

memcached nosql 缓存运维云数据库 Redis

当你在电商平台秒杀商品或者在社交网络刷热门话题的时候，可以很明显感受到当前网络数据流量的恐怖，几十万商品刚开抢，一秒都不到就售罄；哪个大明星出轨的消息一出现，瞬间阅读与转发次数可以达到上亿。作为终端用户的我们可能会思考，服务系统是怎么在这样严峻的流量环境中存活下来的。

腾讯技术工程官方号

2019-05-16

1.1K0

深入浅出百亿请求高可用Redis(codis)分布式集群揭秘

云数据库 Redis 网络安全迁移编程算法

摘要：作为noSql中的kv数据库的王者，redis以其高性能，低时延，丰富的数据结构备受开发者青睐，但是由于redis在水平伸缩性上受限，如何做到能够水平扩容，同时对业务无侵入性是很多使用redis的开发人员都会面临的问题，而redis分布式解决方案的一个开源产品【codis】较好的弥补了这一弱势，本文主要讲解codis是如何做到对业务无感知，平滑迁移，迁移性能高，迁移异常处理，高可用以及常见的redis的避坑指南，虽然codis目前随着公司的nosql产品越来越成熟，生命周期也即将结束，不过鉴于还

腾讯技术工程官方号

2019-05-16

1.8K0

SDCC 2017 深圳站应用架构及大数据双峰会

云数据库 Redis 容器云数据库 SQL Server

前言 6月10-11日，2017年SDCC峰会在深圳举行。为期两天的会议邀请业内顶尖的架构师和数据技术专家分享干货实料。来自腾讯TEG架构平台部的Jerome以及数据平台部的Boyce作为演讲嘉宾，分别发表主题为“基于空闲资源的弹性计算实践”以及“StreamSQL实时计算平台的挑战及解决方案”的演讲。本文为演讲者现场PPT及演讲稿整理编辑。大会介绍 SDCC 2017·深圳站，拥有互联网应用架构实战峰会、大数据技术实战峰会两大峰会，秉承干货实料的内容原则，邀请业内顶尖的架构师和数据技术专家，共话高可用

腾讯技术工程官方号

2018-01-30

7340

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态