首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

谈谈缓存更新

看到好些人在写更新缓存数据代码时,先删除缓存,然后再更新数据库,而后续的操作会把数据再装载的缓存中。然而,这个是逻辑是错误的。...试想,两个并发操作,一个是更新操作,另一个是查询操作,更新操作删除缓存后,查询操作没有命中缓存,先把老数据读出来后放到缓存中,然后更新操作更新了数据库。...这里,我们先不讨论更新缓存更新数据这两个事是一个事务的事,或是会有失败的可能,我们先假设更新数据库和更新缓存都可以成功的情况(我们先把成功的代码逻辑先写对)。...为什么不是写完数据库后更新缓存?...Write Back套路,一句说就是,在更新数据的时候,只更新缓存,不更新数据库,而我们的缓存会异步地批量更新数据库。

1.1K20

缓存雪崩、缓存穿透、缓存预热、缓存更新缓存降级等问题!

,今天给大家整理一篇关于Redis经常被问到的问题:缓存雪崩、缓存穿透、缓存预热、缓存更新缓存降级等概念的入门及简单解决方案。...(2)还有一个解决办法解决方案是:给每一个缓存数据增加相应的缓存标记,记录缓存的是否失效,如果缓存标记失效,则更新数据缓存,实例伪代码如下: ?...解释说明: 1、缓存标记:记录缓存数据是否过期,如果过期会触发通知另外的线程在后台去更新实际key的缓存; 2、缓存数据:它的过期时间比缓存标记的时间延长1倍,例:标记缓存时间30分钟,数据缓存设置为60...这样,当缓存标记key过期后,实际缓存还能把旧数据返回给调用端,直到另外的线程在后台更新完成后,才会返回新缓存。...关于缓存崩溃的解决方法,这里提出了三种方案:使用锁或队列、设置过期标志更新缓存、为key设置不同的缓存失效时间,还有一各被称为“二级缓存”的解决方法,有兴趣的读者可以自行研究。

3.7K10
您找到你想要的搜索结果了吗?
是的
没有找到

漫谈缓存更新之道

许多人在更新缓存时,先删除缓存,然后再更新数据库,而后续的操作会把数据再装载入缓存中。 然而,这个逻辑是错误的!!!...试想,两个并发操作,一个更新,一个查询,更新删除缓存后,查询没有命中缓存,先把旧数据读出来后放到缓存中,然后更新操作更新了数据库。于是,在缓存中的数据还是旧数据,导致缓存中持续地产生脏数据....这里,我们先不讨论更新缓存更新数据这两个事是一个事务的事,或是会有失败的可能,我们先假设更新数据库和更新缓存都可以成功的情况 更新缓存的的Design Pattern有四种 1 Cache Aside...,成功后,让缓存失效 一个查询操作,一个更新操作的并发 首先,没有了删除cache数据的操作,而是先更新数据库中的数据,此时,缓存依然有效,所以,并发的查询操作拿的是没有更新的数据,但是,更新操作马上让缓存的失效了...则用缓存服务自己来加载,从而对应用方是透明的 2.2 Write Through 和Read Through相仿,不过是在更新数据时发生 当有数据更新时 如果没有命中缓存,直接更新数据库,然后返回

3.1K31

缓存更新的套路

看到好些人在写更新缓存数据代码时,先删除缓存,然后再更新数据库,而后续的操作会把数据再装载的缓存中。然而,这个是逻辑是错误的。...试想,两个并发操作,一个是更新操作,另一个是查询操作,更新操作删除缓存后,查询操作没有命中缓存,先把老数据读出来后放到缓存中,然后更新操作更新了数据库。...这里,我们先不讨论更新缓存更新数据这两个事是一个事务的事,或是会有失败的可能,我们先假设更新数据库和更新缓存都可以成功的情况(我们先把成功的代码逻辑先写对)。...为什么不是写完数据库后更新缓存?...Write Back套路,一句说就是,在更新数据的时候,只更新缓存,不更新数据库,而我们的缓存会异步地批量更新数据库。

2.1K70

缓存更新的套路

看到好些人在写更新缓存数据代码时,先删除缓存,然后再更新数据库,而后续的操作会把数据再装载的缓存中。然而,这个是逻辑是错误的。...试想,两个并发操作,一个是更新操作,另一个是查询操作,更新操作删除缓存后,查询操作没有命中缓存,先把老数据读出来后放到缓存中,然后更新操作更新了数据库。...这里,我们先不讨论更新缓存更新数据这两个事是一个事务的事,或是会有失败的可能,我们先假设更新数据库和更新缓存都可以成功的情况(我们先把成功的代码逻辑先写对)。...为什么不是写完数据库后更新缓存?...Write Back套路,一句说就是,在更新数据的时候,只更新缓存,不更新数据库,而我们的缓存会异步地批量更新数据库。

1.3K130

缓存更新策略

问题:项目中,Redis用了缓存热点数据,持久化数据在MySQL DB中;那么Redis缓存数据什么时候更新呢? 方法A: 步骤:1....删除缓存,2.更新DB , 3.下一次读操作没有命中缓存时,更新缓存; 存在的问题:如果另外一个读任务发生在"更新DB"之前,那么缓存就"更新DB"之前的“脏数据”; 方法B:...步骤:1.更新DB,2.更新缓存; 存在的问题:如果发生并发“更新数据”,程序不能保证“更新缓存”的先后顺序,存在“脏数据”的可能性; 方法C:...步骤:1.更新DB, 2....下一次读操作没有命中缓存时,更新缓存; 存在的问题:如果在步骤1“更新DB”之前,有一个并发读任务没有命中缓存,从DB读取到“老数据”,在步骤2之后才把“老数据”更新缓存,那么缓存中就是

1.5K00

缓存更新的套路

阅读本文大概需要 10 分钟 原文 | http://sina.lt/gpqN 看到好些人在写更新缓存数据代码时,先删除缓存,然后再更新数据库,而后续的操作会把数据再装载到缓存中。...试想,两个并发操作,一个是更新操作,另一个是查询操作,更新操作删除缓存后,查询操作没有命中缓存,先把老数据读出来后放到缓存中,然后更新操作更新了数据库。...这里,我们先不讨论更新缓存更新数据这两个事是不是一个事务的事,或是会有失败的可能,我们先假设更新数据库和更新缓存都可以成功的情况(我们先把成功的代码逻辑先写对)。...更新:先把数据存到数据库中,成功后,再让缓存失效。 ? 注意,我们的更新是先更新数据库,成功后,让缓存失效。那么,这种方式是否可以避免文章前面提到过的那个问题呢?...Write Back 套路,一句说就是,在更新数据的时候,只更新缓存,不更新数据库,而我们的缓存会异步地批量更新数据库。

1.3K20

Redis缓存雪崩、缓存穿透、缓存预热、缓存更新缓存降级等问题

一、缓存雪崩 由于原有缓存失效,新缓存未到期间,比如我们设置缓存时采用了相同的过期时间,在同一时刻出现大面积的缓存过期,所有原本应该访 问缓存的请求都去查询数据库了,而对数据库CPU和内存造成巨大压力,...(2)还有一个简单方案就时将缓存失效时间分散开。 二、缓存穿透 缓存穿透是指用户查询数据,在数据库没有,自然在缓存中也不会有。...三、缓存预热 缓存预热这个应该是一个比较常见的概念,相信很多人都应该可以很容易的理解,缓存预热就是系统上线后,将相关的缓存数据直接加载到缓存系统。...用户直接查询事先被预热的缓存数据 解决办法 (1)直接写个缓存刷新页面,上线时手工操作下; (2)数据量不大,可以在项目启动的时候自动进行加载; (3)定时刷新缓存; 四、缓存更新 除了缓存服务器自带的缓存失效策略之外...,过期的话就去底层系统得到新数 据并更新缓存

2.2K20

缓存雪崩,缓存穿透,缓存预热,缓存热备都是什么鬼?

缓存雪崩,缓存穿透,缓存预热,缓存热备是在做缓存设计或者缓存应用时经常遇到的概念,也是缓存应用过程中必须熟知及知道 的东西。...缓存雪崩 当缓存处于单点情况下,一旦缓存服务器崩溃,所有的请求就会落到数据库层,此时,如果由于访问量过大则会导致数据库宕机,进而导致整个网站或服务不可用,这种缓存故障就是俗称的缓存雪崩。...解决方案:解决缓存雪崩故障,就得解决单点问题,提高缓存高可用性,建立分布式的高可用缓存系统,一台缓存服务器挂了,另外的一台起来继续工作,更不能影响其他的缓存系统。...缓存预热 新的缓存系统没有任何缓存数据,在缓存重建数据的过程中,系统性能和数据库负载都不太好,所以最好是在系统上线之前就把要缓存的热点数据加载到缓存中,这种缓存预加载手段就是缓存预热。...缓存热备 缓存热备即当一台缓存服务器不可用时能实时切换到备用缓存服务器,不影响缓存使用。集群模式下,每个主节点都会有一个或多个从节点来当备用,一旦主节点挂点,从节点立即充当主节点使用。

95340

缓存层场景实战读缓存,如何更新缓存+缓存的高可用设计+监控

◆ 如何更新缓存 更新缓存的步骤特别简单,共两步:更新数据库和更新缓存。但这简单的两步中需要考虑很多问题。 1)先更新数据库还是先更新缓存更新缓存时先删除还是直接更新?...◆ 组合1:先更新缓存,再更新数据库 对于这个组合,会遇到这种情况:假设第二步更新数据库失败了,要求回滚缓存更新,这时该怎么办呢?...2)线程A将缓存中的值更新成b,且保存了原来的值a,然后更新数据库。 3)线程B将缓存中的值更新成c,且保存了原来的值b,然后更新数据库。...◆ 组合3:先更新数据库,再更新缓存 对于组合3,同样需要考虑两个问题。 1)假设第一步(更新数据库)成功,第二步(更新缓存)失败了怎么办?...◆ 组合5:先删除缓存更新数据库,再删除缓存 还有一个方案,就是先删除缓存,再更新数据库,再删除缓存

77110

缓存层场景实战读缓存,如何更新缓存+缓存的高可用设计+监控

如何更新缓存 更新缓存的步骤特别简单,共两步:更新数据库和更新缓存。但这简单的两步中需要考虑很多问题。 1)先更新数据库还是先更新缓存更新缓存时先删除还是直接更新?...组合1:先更新缓存,再更新数据库 对于这个组合,会遇到这种情况:假设第二步更新数据库失败了,要求回滚缓存更新,这时该怎么办呢?...2)线程A将缓存中的值更新成b,且保存了原来的值a,然后更新数据库。 3)线程B将缓存中的值更新成c,且保存了原来的值b,然后更新数据库。...组合3:先更新数据库,再更新缓存 对于组合3,同样需要考虑两个问题。 1)假设第一步(更新数据库)成功,第二步(更新缓存)失败了怎么办?...组合5:先删除缓存更新数据库,再删除缓存 还有一个方案,就是先删除缓存,再更新数据库,再删除缓存

78630

Redis 缓存主动更新策略

Cache Aside Pattern:由缓存的调用者,在更新数据库的同时更新缓存Read/Write Through Pattern:缓存与数据库整合为一个服务,由服务来维护一致性。...Pattern 可靠性更高一点操作缓存和数据库时要考虑如下几个问题- 删除缓存还是更新缓存?...- 更新缓存:每次更新数据库都更新缓存,无效写操作较多- 删除缓存更新数据库时让缓存失效,查询时再更新缓存(更优)- 如何保证缓存和数据库的操作的同时成功或失败?...(线程安全)- 先删除缓存,再操作数据库- 先操作数据库,再删除缓存- 由于 redis 的速度远比 MySQL 要快,所以方案二为优选图片缓存更新策略的最佳方案- 低一致性需求:使用Redis自带的内存淘汰机制...- 高一致性需求:主动更新,并以超时剔除作为兜底方案- 读操作:- 缓存命中则直接返回- 缓存未命中则查询数据库,并写入缓存,设定超时时间- 写操作:- 先写数据库,然后再删除缓存- 要确保数据库与缓存操作的原子性

4K50

来说说缓存穿透、缓存击穿、缓存雪崩都是什么?怎么解决?

缓存穿透 面试的时候就被问到了这个问题,具体描述就是,正常的请求都是先请求到缓存(就当我们的缓存是Redis吧),如果缓存中存在数据,就直接返回,如果缓存中不存在请求的数据,就查询数据库,然后将查询到的数据再放到缓存中...解决缓存穿透 那么如何解决缓存穿透呢? 首先最基本的就是要做参数校验,非法的参数就直接return,连缓存层都到不了。...缓存击穿 我们在Redis存储的数据,主要是缓存的效果,目的是为了解决DB的压力,所以一些热点数据,都是先从缓存中获取的,当缓存中不存在的时候再从DB中获取然后再存入缓存。...解决缓存击穿 造成缓存击穿的原因是,在同一时刻从数据库中获取了大量数据,并且设置了相同的过期时间,这些缓存就会在同一时刻失效,这样就造成了缓存击穿的问题。...热点数据永不过期,更新操作时直接更新缓存,但是并不设置过期时间。

56531

面试官:说说你对keep-alive的理解是什么?怎么缓存当前的组件?缓存后怎么更新

一、Keep-alive 是什么 keep-alive是vue中的内置组件,能在组件切换过程中将状态保留在内存中,防止重复渲染DOM keep-alive 包裹动态组件时,会缓存不活动的组件实例,而不是销毁它们...只有名称匹配的组件会被缓存 exclude - 字符串或正则表达式。任何名称匹配的组件都不会被缓存 max - 数字。...)–>返回到首页(需要缓存)–>再次进入列表页(不需要缓存),这时候可以按需来控制页面的keep-alive 在路由中设置keepAlive属性判断是否需要缓存 { path: 'list',...,如果匹配不上,则表示在新的缓存规则下该组件已经不需要被缓存,则调用pruneCacheEntry函数将其从this.cache对象剔除即可 关于keep-alive的最强大缓存功能是在render函数中实现...中缓存组件的数量是否超过了设置的最大缓存数量值this.max,如果超过了,则把第一个缓存组件删掉 四、思考题:缓存后如何获取数据 解决方案可以有以下两种: beforeRouteEnter actived

2.6K21

HTTP的缓存机制是什么

当客户端或代理服务器收到对资源的请求时,它们首先检查缓存,如果存在有效的缓存副本,就可以直接返回缓存的副本,从而避免了请求的发送和服务器端的处理过程。...HTTP 缓存机制主要涉及以下几个关键概念和组件: 1.缓存标识: URL:URL 是最常见的缓存标识符。如果两个请求的 URL 相同,缓存可以被复用。...4.缓存策略: 强缓存:通过设置合适的缓存控制标头(如 Cache-Control 和 Expires),服务器可以要求客户端或代理服务器始终使用缓存副本,而不需要进行验证。...协商缓存:如果缓存控制标头指定了需要进行验证,客户端会向服务器发送验证请求。...5.缓存位置: 浏览器缓存:现代 Web 浏览器会自动缓存资源,包括页面、脚本、样式表和图像等。 代理服务器缓存:代理服务器可以缓存经过它的请求和响应,以减少对源服务器的访问。

25920

缓存雪崩,缓存穿透,缓存击穿是什么?我们要怎么解决这些问题?

一 前言 在开发过程中,为了减轻数据库的压力,我们经常会使用到缓存,所以相信大家对缓存雪崩,缓存穿透,缓存击穿这三个名词并不陌生。...今天就和大家一起分享一下,到底什么是缓存雪崩,缓存穿透,缓存击穿,我们要怎么做才能解决这些问题。 二:缓存雪崩 1.什么是缓存雪崩?...② 使用多级缓存 我们可以使用多级缓存,从而减少缓存雪崩的概率。例如我们可以用Caffeine作为本地缓存(一级缓存),redis作为二级缓存,一级缓存中找不到,再去二级缓存中找。...② 使用多级缓存 多级缓存不仅可以很大程度上避免缓存雪崩,也可以很大程度上解决缓存击穿的问题,所以其实多级缓存还是很有必要的,利用caffeine做一个本地缓存,redis做二级缓存,这样的话还可以减少...但是如果遭到恶意的攻击,通常会导致我们缓存中都是一些无用缓存,而真正需要缓存的数据却被缓存淘汰策略所淘汰。

47120

你是如何更新缓存的?看懂这篇缓存读写策略

也许你会觉得缓存读写很简单: 先读缓存缓存不命中就查DB,查到了就回种缓存 先删缓存,再更新DB,而后续操作会把数据再装载到缓存 这是错误的。最简单的两个并发操作:更新&查询。...更新操作删除缓存后,查询操作没有命中缓存,先把老数据读出来后放到缓存,然后更新操作更新了数据库。于是,缓存中的数据还是老数据,导致缓存中的数据是脏的,而且还一直这样脏下去。...一个查询操作,一个更新操作的并发 首先,没有了删除cache数据的操作,而是先更新数据库中的数据,此时,缓存依然有效,所以,并发的查询操作拿的是没有更新的数据,但是,更新操作马上让缓存的失效了,后续的查询操作再把数据从数据库中拉出来...为什么不是写DB后更新缓存?...则用缓存服务自己来加载,从而对应用方是透明的 2.2 Write Through 和Read Through相仿,不过是在更新数据时发生 当有数据更新时 如果没有命中缓存,直接更新数据库,然后返回 如果命中了缓存

89140

如何以正确姿势引入缓存更新

互联网业务系统在应对大并发时候通常会选择引入缓存,当然可以Scale UP,但是响应成本上升,引入缓存是一种比较经济有效方法。...在面对各种缓存更新与访问策略时候我们可能会眼花缭乱,不合适的缓存更新策略可能达不到预期效果。 为什么要引入缓存呢? DB查询慢,通过分库分表或者对数据库进行垂直扩展,通过索引加速查询速度。...基于缓存可以轻松实现复杂查询。 引入缓存钱我们最好问自己三个问题 系统是否存在读多写少? 数据是否写入一次,多次读取? 数据是否始终唯一?...1 数据访问策略 1.1 Cache-Aside image.png Cache Aside作为最常见一种缓存更新策略,在后台使用最为广泛。...假设更新时间为m,单位为秒,更新因子为p(范围0-1) 1 应用程序访问Cache,如果距离上次更新时间小于m*p,那么可以直接使用Cache数据 2 如果距离上次访问时间大于m*p,小于m,那么触发异步更新

1.2K30
领券