热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

后端开发必须知道的缓存知识

作为一个后端,如果你没用过缓存,证明你的业务是真的很小,或者你的数据库是真的厉害。那么,你真的会用缓存么?

作为一个后端,如果你没用过缓存,证明你的业务是真的很小,或者你的数据库是真的厉害。

那么,你真的会用缓存么?

什么时候需要缓存

首先最常见的就是接口的返回值加缓存,避免直接查库,尤其是榜单这种查起来很慢,但是访问很频繁的地方。

其次是元数据缓存,比如一个用户的信息,一条朋友圈的数据,查的时候只用查ID,然后去点查缓存。

最后是异步缓存,比如延时批次写,或者延时批次发包等等。

不会有人用缓存做消息队列吧,不会吧不会吧。

//todo 为什么不能用Redis做消息队列 (后面我放到消息队列的架构篇说吧)

怎么保持数据一致性。

数据一致性的一些思考

常见的大致有四种方案:

第一种,串行化

走队列,慢慢刷盘和更新缓存。

会有ABA的问题,就是比如我关注了一个人,然后取关,再关注,然后刷新页面,就会一下关注一下没关注。放大了之后就是主播的粉丝数忽上忽下。

第二种,Cache Aside Pattern:


  • 读的时候,先读缓存,缓存没有的话,就读数据库,然后取出数据后放入缓存,同时返回响应。
  • 更新的时候,先更新数据库,然后再删除缓存

Cache Aside Pattern为什么建议淘汰缓存,而不是更新缓存?

答:如果更新缓存,在并发写时,可能出现数据不一致。

为什么先数据库而不是先缓存

答:两个并发操作,一个是更新操作A,另一个是查询操作B。更新操作A删除缓存后,查询操作B没有命中缓存,先把老数据读出来后放到缓存中,然后更新操作A更新了数据库。于是,在缓存中的数据还是老的数据,导致缓存中的数据是脏的,而且还一直这样脏下去了。

有没有可能读到脏数据?有,A读到老数据,然后B更新,删除缓存,A把老数据放到缓存,就脏了。但是,A只是放到缓存一下,比B写库慢那么多的情况是几乎不可能的。

第三种,中间件。

mysql哪一章我提到过了,就是让业务端无感,直接操作中间件,然后中间件去维护。这种方式也叫
Read/Write Through Pattern

Read Through

Read Through 套路就是在查询操作中更新缓存,也就是说,当缓存失效的时候(过期或LRU换出),Cache Aside是由调用方负责把数据加载入缓存,而Read Through则用缓存服务自己来加载,从而对应用方是透明的。

Write Through

Write Through 套路和Read Through相仿,不过是在更新数据时发生。当有数据更新的时候,如果没有命中缓存,直接更新数据库,然后返回。如果命中了缓存,则更新缓存,然后再由Cache自己更新数据库(这是一个同步操作)

第四种,Write Behind

也叫Write Back,就是在更新数据的时候,只更新缓存,不更新数据库;然后异步地批量更新数据库。

这个设计的好处就是让数据的I/O操作非常快(因为直接操作内存 ),因为异步,write backg还可以合并对同一个数据的多次操作,所以性能的提高是相当可观的。

其实,mysql、Linux的文件写入都是这个套路。

缺点是什么?可能丢数据,缓存的易失性是高于数据库(文件)的,宕机就会导致丢失数据。

雪崩、穿透和击穿


  • 雪崩
    缓存设置的过期时间都一样,在某一刻大面积过期,即缓存失效,流量大面积打到数据库,导致崩溃。(缓存宕机了也是一样)

解决:随机添加过期时间。

  • 穿透
    就是缓存没有,就查库,然后库里面本来就没有,生成的缓存自然没有,这样就会无限打到库。

比如我遇到的,配置表,根本没这个配置,然后每次需要这个配置的时候就要重新生成缓存,然后代码里面用的又很多,成几何倍数放大。

解决:持久化缓存,不过期,缓存没有就没有,后台改配置的时候再重新生成这个缓存。

  • 击穿
    主要是热点缓存,在某一刻过期,大量流量并发打到数据库,就像凿开了一个洞。

解决:永不过期。或者用任务后台定时更新缓存,不走接口触发。

结语


  • 如果有不对的地方欢迎指正。
  • 如果有不理解的地方欢迎指出我来加栗子。
  • 如果感觉OK可以点赞让更多人看到它。

推荐阅读
  • 1.如何在运行状态查看源代码?查看函数的源代码,我们通常会使用IDE来完成。比如在PyCharm中,你可以Ctrl+鼠标点击进入函数的源代码。那如果没有IDE呢?当我们想使用一个函 ... [详细]
  • MySQL缓存机制深度解析
    本文详细探讨了MySQL的缓存机制,包括主从复制、读写分离以及缓存同步策略等内容。通过理解这些概念和技术,读者可以更好地优化数据库性能。 ... [详细]
  • 深入探讨CPU虚拟化与KVM内存管理
    本文详细介绍了现代服务器架构中的CPU虚拟化技术,包括SMP、NUMA和MPP三种多处理器结构,并深入探讨了KVM的内存虚拟化机制。通过对比不同架构的特点和应用场景,帮助读者理解如何选择最适合的架构以优化性能。 ... [详细]
  • 深入解析 Apache Shiro 安全框架架构
    本文详细介绍了 Apache Shiro,一个强大且灵活的开源安全框架。Shiro 专注于简化身份验证、授权、会话管理和加密等复杂的安全操作,使开发者能够更轻松地保护应用程序。其核心目标是提供易于使用和理解的API,同时确保高度的安全性和灵活性。 ... [详细]
  • 探讨如何真正掌握Java EE,包括所需技能、工具和实践经验。资深软件教学总监李刚分享了对毕业生简历中常见问题的看法,并提供了详尽的标准。 ... [详细]
  • FinOps 与 Serverless 的结合:破解云成本难题
    本文探讨了如何通过 FinOps 实践优化 Serverless 应用的成本管理,提出了首个 Serverless 函数总成本估计模型,并分享了多种有效的成本优化策略。 ... [详细]
  • 本文详细记录了在基于Debian的Deepin 20操作系统上安装MySQL 5.7的具体步骤,包括软件包的选择、依赖项的处理及远程访问权限的配置。 ... [详细]
  • Hadoop入门与核心组件详解
    本文详细介绍了Hadoop的基础知识及其核心组件,包括HDFS、MapReduce和YARN。通过本文,读者可以全面了解Hadoop的生态系统及应用场景。 ... [详细]
  • 基于KVM的SRIOV直通配置及性能测试
    SRIOV介绍、VF直通配置,以及包转发率性能测试小慢哥的原创文章,欢迎转载目录?1.SRIOV介绍?2.环境说明?3.开启SRIOV?4.生成VF?5.VF ... [详细]
  • 本文详细介绍了Python编程语言的学习路径,涵盖基础语法、常用组件、开发工具、数据库管理、Web服务开发、大数据分析、人工智能、爬虫开发及办公自动化等多个方向。通过系统化的学习计划,帮助初学者快速掌握Python的核心技能。 ... [详细]
  • 作者:守望者1028链接:https:www.nowcoder.comdiscuss55353来源:牛客网面试高频题:校招过程中参考过牛客诸位大佬的面经,但是具体哪一块是参考谁的我 ... [详细]
  • 深入理解Redis的数据结构与对象系统
    本文详细探讨了Redis中的数据结构和对象系统的实现,包括字符串、列表、集合、哈希表和有序集合等五种核心对象类型,以及它们所使用的底层数据结构。通过分析源码和相关文献,帮助读者更好地理解Redis的设计原理。 ... [详细]
  • 本文探讨了如何在日常工作中通过优化效率和深入研究核心技术,将技术和知识转化为实际收益。文章结合个人经验,分享了提高工作效率、掌握高价值技能以及选择合适工作环境的方法,帮助读者更好地实现技术变现。 ... [详细]
  • 深入解析Redis内存对象模型
    本文详细介绍了Redis内存对象模型的关键知识点,包括内存统计、内存分配、数据存储细节及优化策略。通过实际案例和专业分析,帮助读者全面理解Redis内存管理机制。 ... [详细]
  • Netflix利用Druid实现高效实时数据分析
    本文探讨了全球领先的在线娱乐公司Netflix如何通过采用Apache Druid,实现了高效的数据采集、处理和实时分析,从而显著提升了用户体验和业务决策的准确性。文章详细介绍了Netflix在系统架构、数据摄取、管理和查询方面的实践,并展示了Druid在大规模数据处理中的卓越性能。 ... [详细]
author-avatar
手机用户2502937805
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有