热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

深入解析队列机制及其广泛的应用场景

本文深入探讨了队列机制的核心原理及其在多种应用场景中的广泛应用。首先,文章详细解析了队列的基本概念、操作方法及其时间复杂度。接着,通过具体实例,阐述了队列在操作系统任务调度、网络通信、事件处理等领域的实际应用。此外,文章还对比了队列与其他常见数据结构(如栈、数组和链表)的优缺点,帮助读者更好地理解和选择合适的数据结构。最后,通过具体的编程示例,进一步巩固了对队列机制的理解和应用。

  数据结构&算法模块总结


  • (1)复杂度分析原理与方法
  • (2)数组与链表原理和使用场景讲解
  • (3)栈原理与应用场景讲解
  • (4)队列原理与应用场景讲解
  • (5)递归原理与虚拟机栈场景应用
  • (6)二分查找及其应用场景
  • (7) Redis有序集合跳表实现原理
  • (8) 散列表(Hash Table)原理和业界应用场景

1.链式队列和数组队列




(1)数组队列

    队列与栈的最大特点就是:队列有队头和队尾指针(下标),而栈只有顶端指针(下标)。

    一句话总结两者特点:“队列吃多了会拉(头进尾出),而栈吃多了会吐 (头进头出)

public class ArrayQueue {private String[] items; // 数组private int n = 0; // 数组大小// ★★head表示队头下标,tail表示队尾下标。栈只有一个顶部下标!private int head = 0;private int tail = 0;// 申请一个大小为capacity的数组public ArrayQueue(int capacity) {items = new String[capacity];n = capacity;}// 入队public boolean enqueue(String item) {// 如果tail == n 表示队列已经满了// ★如果一直入队再一直出队,会造成“假满队”现象!if (tail == n) return false; items[tail] = item;++tail; //★入队尾部后移return true;}// 出队public String dequeue() {// 如果head == tail 表示队列为空// ★这里也会有假满队问题if (head == tail) return null;String ret = items[head];++head; //★出队头部后移return ret;}
}

【入队和出队优化】

        "假满队"问题:入队与出队操作,head和tail都会持续往后移动。当tail移动到最右边,即使数组中还有空闲空间,也无法继续往队列中添加数据

        解决办法:


  • 出队:不搬移数据

  • 入队:集中触发一次数据搬移操作

// 入队操作,将item放入队尾public boolean enqueue(String item) {// tail == n表示队列末尾没有空间了if (tail == n) {// tail ==n && head==0,表示整个队列都占满了if (head == 0) return false; // ★数据搬移for (int i = head; i

(2)链表队列

        实现原理和栈类似,只不过头尾指针需要控制

public class LinkedQueue {//定义一个节点类private class Node{String value;Node next;}//记录队列元素个数private int size = 0;//head指向队头结点,tail指向队尾节点private Node head;private Node tail;//申请一个队列public LinkedQueue(){}//入队public boolean enqueue(String item){Node newNode = new Node();newNode.value = item;if (size == 0) head = newNode;else tail.next = newNode;tail = newNode;size++;return true;}//出队public String dequeue(){String res = null;if(size == 0) return res;if(size == 1) tail = null;res = head.value;head = head.next;size--;return res;}
}


2.循环队列



        循环队列,顾名思义,它⻓得像⼀个环。原本数组是有头有尾的,是⼀条直线。现在我们把⾸尾相连,扳成了⼀个环。

         我们可以看到,图中这个队列的⼤⼩为8,当前head=4,tail=7。当有⼀个新的元素a⼊队时,我们放⼊下标为7的位置。但这个时候,我们并不把tail更新为8,⽽是将其在环中后移⼀位,到下标为0的位置。当再有⼀个元素b⼊队时,我们将b放⼊下标为0的位置,然后tail加1更新为1。所以,在a,b依次⼊队之后,循环队列中的元素就变成了下⾯的样⼦:

         通过这样的⽅法,我们成功避免了数据搬移操作。看起来不难理解,但是循环队列的代码实现难度要⽐前⾯讲的⾮循环队列难多了。要想写出没有bug的循环队列的实现代码,我个⼈觉得,最关键的是,确定好队空和队满的判定条件。

        在⽤数组实现的⾮循环队列中,队满的判断条件是tail == n,队空条件是head == tail。那针对循环队列,如何判断队空和队满呢?

        队列为空的判断条件仍然是head == tail。但队列满的判断条件就稍微有点复杂了。我画了⼀张队列满的图,你可以看⼀下,试着总结⼀下规律。

         就像我图中画的队满的情况,tail=3,head=4,n=8,所以总结⼀下规律就是:(3+1)%8=4。多画⼏张队满的图,你就会发现,当队满时,(tail+1)%n=head。

        你有没有发现,当队列满时,图中的tail指向的位置实际上是没有存储数据的。所以,循环队列会浪费⼀个数组的存储空间。
        Talk is cheap,如果还是没怎么理解,那就show you code吧。

public class CircularQueue {// 数组:items,数组大小:nprivate String[] items;private int n = 0;// head表示队头下标,tail表示队尾下标private int head = 0;private int tail = 0;// 申请一个大小为capacity的数组public CircularQueue(int capacity) {items = new String[capacity];n = capacity;}// 入队public boolean enqueue(String item) {// 队列满了if ((tail + 1) % n == head) return false;items[tail] = item;tail = (tail + 1) % n;return true;}// 出队public String dequeue() {// 如果head == tail 表示队列为空if (head == tail) return null;String ret = items[head];head = (head + 1) % n;return ret;}
}


3.队列应用介绍




(1) 阻塞队列 (入队、出队阻塞)


    ①阻塞原理如下:

  • 队列空时:从队头取数据会被阻塞,直到队列中有了数据才能返回;
  • 队列满时:在队尾插入数据会被阻塞,直到队列中有空闲位置后再插入数据,然后再返回。



      ②阻塞原型本质是生产者与消费者

 在多线程情况下,会有多个线程同时操作队列,但这个时候就会存在线程安全问题。见并发队列解决方案。


(2) 并发队列队列 (多线程操作)


①并发原理(关注锁粒度即可


  • 最简单直接的实现方式是直接在enqueue()、dequeue()方法上加锁但是锁粒度大并发度会比较低同一时刻仅允许一个生产者存或者消费者取操作

  • 实际上,基于数组的循环队列,利用CAS原子操作,可以实现非常高效的并发队列。这也是循环队列比链式队列应用更加广泛的原因。


②并发请求处理策略


  • 非阻塞方式: 请求满时,直接拒绝任务请求

  • 阻塞方式:请求满时,排队等候直到有空闲线程处理


③采用不同数据结构实现特点


  • 链表实现无限排队的无界队列,但是可能会导致过多的请求排队等待,请求处理的响应时间过长。不适合快速响应系统

  • 数组实现: 队列的大小有限,所以线程池中排队的请求超过队列大小时,接下来的请求就会被拒绝。适合快速响应系统。队列太大导致等待的请求太多,队列太小会导致无法充分利用系统资源、发挥最大性能(太大请求超时,太小降低并发量浪费资源)


④CAS实现无锁并发队列原理


  • 入队前:获取队列tail位置,入队时比较tail位置是否发生变化,如果未变化,则允许入队。否则拒绝本次请求。

  • 出队前:获取队列head位置,同上比较是否发生变化,若未变化则允许出队。


⑤Kafka分布式消息队列原理(待补充)


推荐阅读
  • 本文探讨了如何通过一系列技术手段提升Spring Boot项目的并发处理能力,解决生产环境中因慢请求导致的系统性能下降问题。 ... [详细]
  • 深入解析Java虚拟机(JVM)架构与原理
    本文旨在为读者提供对Java虚拟机(JVM)的全面理解,涵盖其主要组成部分、工作原理及其在不同平台上的实现。通过详细探讨JVM的结构和内部机制,帮助开发者更好地掌握Java编程的核心技术。 ... [详细]
  • 在高并发需求的C++项目中,我们最初选择了JsonCpp进行JSON解析和序列化。然而,在处理大数据量时,JsonCpp频繁抛出异常,尤其是在多线程环境下问题更为突出。通过分析发现,旧版本的JsonCpp存在多线程安全性和性能瓶颈。经过评估,我们最终选择了RapidJSON作为替代方案,并实现了显著的性能提升。 ... [详细]
  • 深入解析Java多线程与并发库的应用:空中网实习生面试题详解
    本文详细探讨了Java多线程与并发库的高级应用,结合空中网在挑选实习生时的面试题目,深入分析了相关技术要点和实现细节。文章通过具体的代码示例展示了如何使用Semaphore和SynchronousQueue来管理线程同步和任务调度。 ... [详细]
  • 本题要求在一组数中反复取出两个数相加,并将结果放回数组中,最终求出最小的总加法代价。这是一个经典的哈夫曼编码问题,利用贪心算法可以有效地解决。 ... [详细]
  • 本文深入探讨了MySQL中常见的面试问题,包括事务隔离级别、存储引擎选择、索引结构及优化等关键知识点。通过详细解析,帮助读者在面对BAT等大厂面试时更加从容。 ... [详细]
  • 深入剖析JVM垃圾回收机制
    本文详细探讨了Java虚拟机(JVM)中的垃圾回收机制,包括其意义、对象判定方法、引用类型、常见垃圾收集算法以及各种垃圾收集器的特点和工作原理。通过理解这些内容,开发人员可以更好地优化内存管理和程序性能。 ... [详细]
  • Linux系统中Java程序Too Many Open Files问题的深入解析与解决方案
    本文详细分析了在Linux环境下运行的Java应用程序中可能出现的“Too many open files”异常现象,探讨其成因及解决方法。该问题通常出现在高并发文件访问或大量网络连接场景下,对系统性能和稳定性有较大影响。 ... [详细]
  • 由二叉树到贪心算法
    二叉树很重要树是数据结构中的重中之重,尤其以各类二叉树为学习的难点。单就面试而言,在 ... [详细]
  • 并发编程 12—— 任务取消与关闭 之 shutdownNow 的局限性
    Java并发编程实践目录并发编程01——ThreadLocal并发编程02——ConcurrentHashMap并发编程03——阻塞队列和生产者-消费者模式并发编程04——闭锁Co ... [详细]
  • 本文介绍了一种基于选择排序思想的高效排序方法——堆排序。通过使用堆数据结构,堆排序能够在每次查找最大元素时显著提高效率。文章详细描述了堆排序的工作原理,并提供了完整的C语言代码实现。 ... [详细]
  • 本文探讨了符号三角形问题,该问题涉及由相同数量的“+”和“-”符号组成的三角形。通过递归回溯法,可以有效地搜索并计算符合条件的符号三角形的数量。 ... [详细]
  • 优化Flask应用的并发处理:解决Mysql连接过多问题
    本文探讨了在Flask应用中通过优化后端架构来应对高并发请求,特别是针对Mysql 'too many connections' 错误的解决方案。我们将介绍如何利用Redis缓存、Gunicorn多进程和Celery异步任务队列来提升系统的性能和稳定性。 ... [详细]
  • LeetCode: 实现队列与栈的高级应用
    本文介绍如何使用队列和栈实现特定功能,包括动态维护队列元素并计算其平均值,以及栈操作中的优化技巧。 ... [详细]
  • 本文详细介绍了Java中实现异步调用的多种方式,包括线程创建、Future接口、CompletableFuture类以及Spring框架的@Async注解。通过代码示例和深入解析,帮助读者理解并掌握这些技术。 ... [详细]
author-avatar
君与龙_501
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有