热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

后端开发必须知道的缓存知识

作为一个后端,如果你没用过缓存,证明你的业务是真的很小,或者你的数据库是真的厉害。那么,你真的会用缓存么?

作为一个后端,如果你没用过缓存,证明你的业务是真的很小,或者你的数据库是真的厉害。

那么,你真的会用缓存么?

什么时候需要缓存

首先最常见的就是接口的返回值加缓存,避免直接查库,尤其是榜单这种查起来很慢,但是访问很频繁的地方。

其次是元数据缓存,比如一个用户的信息,一条朋友圈的数据,查的时候只用查ID,然后去点查缓存。

最后是异步缓存,比如延时批次写,或者延时批次发包等等。

不会有人用缓存做消息队列吧,不会吧不会吧。

//todo 为什么不能用Redis做消息队列 (后面我放到消息队列的架构篇说吧)

怎么保持数据一致性。

数据一致性的一些思考

常见的大致有四种方案:

第一种,串行化

走队列,慢慢刷盘和更新缓存。

会有ABA的问题,就是比如我关注了一个人,然后取关,再关注,然后刷新页面,就会一下关注一下没关注。放大了之后就是主播的粉丝数忽上忽下。

第二种,Cache Aside Pattern:


  • 读的时候,先读缓存,缓存没有的话,就读数据库,然后取出数据后放入缓存,同时返回响应。
  • 更新的时候,先更新数据库,然后再删除缓存

Cache Aside Pattern为什么建议淘汰缓存,而不是更新缓存?

答:如果更新缓存,在并发写时,可能出现数据不一致。

为什么先数据库而不是先缓存

答:两个并发操作,一个是更新操作A,另一个是查询操作B。更新操作A删除缓存后,查询操作B没有命中缓存,先把老数据读出来后放到缓存中,然后更新操作A更新了数据库。于是,在缓存中的数据还是老的数据,导致缓存中的数据是脏的,而且还一直这样脏下去了。

有没有可能读到脏数据?有,A读到老数据,然后B更新,删除缓存,A把老数据放到缓存,就脏了。但是,A只是放到缓存一下,比B写库慢那么多的情况是几乎不可能的。

第三种,中间件。

mysql哪一章我提到过了,就是让业务端无感,直接操作中间件,然后中间件去维护。这种方式也叫
Read/Write Through Pattern

Read Through

Read Through 套路就是在查询操作中更新缓存,也就是说,当缓存失效的时候(过期或LRU换出),Cache Aside是由调用方负责把数据加载入缓存,而Read Through则用缓存服务自己来加载,从而对应用方是透明的。

Write Through

Write Through 套路和Read Through相仿,不过是在更新数据时发生。当有数据更新的时候,如果没有命中缓存,直接更新数据库,然后返回。如果命中了缓存,则更新缓存,然后再由Cache自己更新数据库(这是一个同步操作)

第四种,Write Behind

也叫Write Back,就是在更新数据的时候,只更新缓存,不更新数据库;然后异步地批量更新数据库。

这个设计的好处就是让数据的I/O操作非常快(因为直接操作内存 ),因为异步,write backg还可以合并对同一个数据的多次操作,所以性能的提高是相当可观的。

其实,mysql、Linux的文件写入都是这个套路。

缺点是什么?可能丢数据,缓存的易失性是高于数据库(文件)的,宕机就会导致丢失数据。

雪崩、穿透和击穿


  • 雪崩
    缓存设置的过期时间都一样,在某一刻大面积过期,即缓存失效,流量大面积打到数据库,导致崩溃。(缓存宕机了也是一样)

解决:随机添加过期时间。

  • 穿透
    就是缓存没有,就查库,然后库里面本来就没有,生成的缓存自然没有,这样就会无限打到库。

比如我遇到的,配置表,根本没这个配置,然后每次需要这个配置的时候就要重新生成缓存,然后代码里面用的又很多,成几何倍数放大。

解决:持久化缓存,不过期,缓存没有就没有,后台改配置的时候再重新生成这个缓存。

  • 击穿
    主要是热点缓存,在某一刻过期,大量流量并发打到数据库,就像凿开了一个洞。

解决:永不过期。或者用任务后台定时更新缓存,不走接口触发。

结语


  • 如果有不对的地方欢迎指正。
  • 如果有不理解的地方欢迎指出我来加栗子。
  • 如果感觉OK可以点赞让更多人看到它。

推荐阅读
  • Redis:缓存与内存数据库详解
    本文介绍了数据库的基本分类,重点探讨了关系型与非关系型数据库的区别,并详细解析了Redis作为非关系型数据库的特点、工作模式、优点及持久化机制。 ... [详细]
  • 电商高并发解决方案详解
    本文以京东为例,详细探讨了电商中常见的高并发解决方案,包括多级缓存和Nginx限流技术,旨在帮助读者更好地理解和应用这些技术。 ... [详细]
  • PHP面试题精选及答案解析
    本文精选了新浪PHP笔试题及最新的PHP面试题,并提供了详细的答案解析,帮助求职者更好地准备PHP相关的面试。 ... [详细]
  • 本文回顾了作者在求职阿里和腾讯实习生过程中,从最初的迷茫到最后成功获得Offer的心路历程。文中不仅分享了个人的面试经历,还提供了宝贵的面试准备建议和技巧。 ... [详细]
  • 七大策略降低云上MySQL成本
    在全球经济放缓和通胀压力下,降低云环境中MySQL数据库的运行成本成为企业关注的重点。本文提供了一系列实用技巧,旨在帮助企业有效控制成本,同时保持高效运作。 ... [详细]
  • 流处理中的计数挑战与解决方案
    本文探讨了在流处理中进行计数的各种技术和挑战,并基于作者在2016年圣何塞举行的Hadoop World大会上的演讲进行了深入分析。文章不仅介绍了传统批处理和Lambda架构的局限性,还详细探讨了流处理架构的优势及其在现代大数据应用中的重要作用。 ... [详细]
  • 深入探讨:Actor模型如何解决并发与分布式计算难题
    在现代软件开发中,高并发和分布式系统的设计面临着诸多挑战。本文基于Akka最新文档,详细探讨了Actor模型如何有效地解决这些挑战,并提供了对并发和分布式计算的新视角。 ... [详细]
  • 探讨在 Swoole 的 WorkerStart 回调中创建的对象如何在多个客户端之间实现隔离,确保每个客户端的数据独立性。 ... [详细]
  • 整理于2020年10月下旬:总结过去,展望未来Itistoughtodayandtomorrowwillbetougher.butthedayaftertomorrowisbeau ... [详细]
  • 春季职场跃迁指南:如何高效利用金三银四跳槽季
    随着每年的‘金三银四’跳槽高峰期的到来,许多职场人士都开始考虑是否应该寻找新的职业机会。本文将探讨如何制定有效的职业规划、撰写吸引人的简历以及掌握面试技巧,助您在这关键时期成功实现职场跃迁。 ... [详细]
  • binlog2sql,你该知道的数据恢复工具
    binlog2sql,你该知道的数据恢复工具 ... [详细]
  • 本文详细介绍了 Redis 中的主要数据类型,包括 String、Hash、List、Set、ZSet、Geo 和 HyperLogLog,并提供了每种类型的基本操作命令和应用场景。 ... [详细]
  • 本文详细介绍了在 CentOS 系统中如何创建和管理 SWAP 分区,包括临时创建交换文件、永久性增加交换空间的方法,以及如何手动释放内存缓存。 ... [详细]
  • MySQL Administrator: 监控与管理工具
    本文介绍了 MySQL Administrator 的主要功能,包括图形化监控 MySQL 服务器的实时状态、连接健康度、内存健康度以及如何创建自定义的健康图表。此外,还详细解释了状态变量和系统变量的管理。 ... [详细]
  • Spring Boot + RabbitMQ 消息确认机制详解
    本文详细介绍如何在 Spring Boot 项目中使用 RabbitMQ 的消息确认机制,包括消息发送确认和消息接收确认,帮助开发者解决在实际操作中可能遇到的问题。 ... [详细]
author-avatar
手机用户2502937805
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有