百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

JAVA并发之BlockingQueue(阻塞队列)

wptr33 2025-09-19 03:54 1 浏览

Java从JDK5开始在并发包内引入了BlockingQueue(阻塞队列),它除了提供队列的FIFO功能之外,还提供了额外的功能,例如:

  1. 当获取队列内容时发现队列为空,则等待其变为非空。
  2. 当往队列存储内容时如果队列已满,则等待其他线程获取队列内容其变得可用。

从源码来看,BlockingQueue主要提供了读和存两组方法:

//往队列尾部添加元素,如果成功返回true,否则抛错
boolean add(E e);
//往队列尾部添加元素,如果成功返回true,否则返回false
boolean offer(E e);
//往队列尾部添加元素,如果成功返回true,否则在指定时间内等待队列变得可用,如果队列仍不可用返回false
boolean offer(E e, long timeout, TimeUnit unit)
//往队列尾部添加元素,如果成功则返回,否则一直等待队列变得可用
void put(E e)

//获取并删除队列头部元素,如果队列为空则一直等待
E take()
//获取并删除队列头部元素,如果成功返回头部元素,否则返回null
E poll();
//获取并删除队列头部元素,如果成功返回头部元素,否则在指定时间内等待队列变得可用返回并返回头部元素,如果队列仍不可用返回null
E poll(long timeout, TimeUnit unit)
//删除队列中的一个元素并返回true(通过equals判断,如果有多个元素相等,只删除一个),没有删除掉元素返回false
boolean remove(Object o);

BlockingQueue继承了Queue接口,同时在并发包内也提供以下几个实现类,本篇文章主要通过ArrayBlockingQueue和LinkedBlockingQueue这两个实现类来介绍BlockingQueue的功能已经其背后的原理。

  • ArrayBlockQueue
  • LinkedBlockingQueue
  • PriorityBlockingQueue
  • SynchronousQueue
  • DelayQueue等

ArrayBlockingQueue

从名字我们可以看出ArrayBlockingQueue是一个基于数组的BlockingQueue,并且数组都是有固定长度的。数组本身是读操作比较有优势,增加、删除操作大部分情况下是性能比较低的,下面我们来看下ArrayBlockingQueue是如何巧妙使用数组的。

从源码可以看到,它有以下几个成员变量:

//用来存储队列的元素
final Object[] items;
//表示下一次读取和移除操作(take、poll等)对应的数组索引
int takeIndex;
//表示下一次添加操作(offer,put等)对应的数组索引
int putIndex;
//实际队列中元素的个数
int count;
//用来控制并发操作的可重入锁
final ReentrantLock lock;
//take等操作用来等待的Condition对象
private final Condition notEmpty;
//put等操作用来等待的Condition对象
private final Condition notFull;

相关的成员变量反应到结构图如下,ArrayBlockingQueue的内部数组items是在构造函数就创建好的,并且长度是固定不变的,它通过改变takeIndex、putIndex和count来表示队列中的状态。比如下图中队列内元素数量count为4(灰色部分)。

那么ArrayBlockingQueue是如何支持多线程同时操作的呢?我们通过源码可以看到它内部是通过ReentrantLock来实现的(ReentrantLock和AQS的介绍可以参考文末链接)。

public E take() throws InterruptedException {
        final ReentrantLock lock = this.lock;
        lock.lockInterruptibly();
        try {
            while (count == 0)
                notEmpty.await();
            return dequeue();
        } finally {
            lock.unlock();
        }
}

public void put(E e) throws InterruptedException {
        checkNotNull(e);
        final ReentrantLock lock = this.lock;
        lock.lockInterruptibly();
        try {
            while (count == items.length)
                notFull.await();
            enqueue(e);
        } finally {
            lock.unlock();
        }
}

ConditionObject

上面的两个ArrayBlockingQueue方法(put和take),它们都用到了AQS中内部类ConditionObject的功能(notEmpty.await()和notFull.await())。

每个ConditionObject内部都维护着一个单向链表,调用await方法会使当前线程加入到这个单向链表中并且使当前线程休眠,调用signal方法会将ConditionObject内单向链表的头结点移动到AQS中并唤醒它。

ArrayBlockingQueue例子

下面我们来看一个简单的ArrayBlockingQueue相关例子,我们启动了两个线程,消费者线程不停的去队列里面获取元素,队列为空的时候就休眠等待,而生产者线程每隔一秒钟往队列里面插入一个元素。

public static void main(String[] args) {
        DateFormat df = new SimpleDateFormat("HH:mm:ss---");
        BlockingQueue<Integer> bq = new ArrayBlockingQueue<>(10);
        Thread consumerThread = new Thread() {
            @Override
            public void run() {
                while (true) {
                    try {
                        Integer value = bq.take();
                        System.out.println(df.format(new Date()) + "get " + value + " from queue");
                    } catch (InterruptedException e) {
                        e.printStackTrace();
                    }
                }
            }
        };
        consumerThread.start();
        
        Thread producerThread = new Thread() {
            @Override
            public void run() {
                for (int i = 0; i < 5; i++) {
                    try {
                        bq.put(i);
                        System.out.println(df.format(new Date()) + "put " + i + " to queue");
                        Thread.sleep(1000);
                    } catch (Exception e) {
                        e.printStackTrace();
                    }
                }
            }
        };
        producerThread.start();
}

程序打印结果如下,和我们预期的一样:

12:54:24---put 0 to queue
12:54:24---get 0 from queue
12:54:25---put 1 to queue
12:54:25---get 1 from queue
12:54:26---put 2 to queue
12:54:26---get 2 from queue
12:54:27---put 3 to queue
12:54:27---get 3 from queue
12:54:28---get 4 from queue
12:54:28---put 4 to queue

LinkedBlockingQueue

LinkedBlockingQueue是一种基于链表BlockingQueue,从功能上来讲,它和ArrayBlockingQueue是一样的,但是底层原理和实现不同,下面我们来看下它和ArrayBlockingQueue的对比。

首先我们看下LinkedBlockingQueue的主要成员变量:

// 阻塞队列的容量,默认是Integer.MAX_VALUE
private final int capacity;
// 当前队列中元素的数量, AtomicInteger相关介绍可以参考文末链接
private final AtomicInteger count = new AtomicInteger();
//链表头结点
transient Node<E> head;
//链表尾节点
private transient Node<E> last;
//获取队列头部元素时使用的可重入锁
private final ReentrantLock takeLock = new ReentrantLock();
//take等操作用来等待的Condition对象
private final Condition notEmpty = takeLock.newCondition();
//往队列尾部添加元素时使用的可重入锁
private final ReentrantLock putLock = new ReentrantLock();
//put等操作用来等待的Condition对象
private final Condition notFull = putLock.newCondition();

从成员变量我们发现,和ArrayBlockingQueue相比,除了内部的数据结构从数组变成了链表,支持多线程操作的可重入锁也分成了两个,一个控制获取(并移除)首元素操作,另一个控制添加操作,这样当同时有两种操作的时候可以得到更好的性能提升。

那么问题来了,为什么ArrayBlockingQueue不使用两把锁呢?这样不是也可以获取更好的吞吐量吗?其主要原因还是ArrayBlockingQueue内的数组是循环使用的,两种操作都操作在同一个数组上并且还有可能操作到同一个元素上,而链表则是随时移除老节点和添加新的节点。

Demo代码位置


src/main/java/net/weichitech/juc/ArrayBlockingQueueTest.java · 小西学编程/java-learning - Gitee.com

相关文章

JAVA并发之ReentrantLock原理解析

JAVA并发之AtomicInteger原理分析

相关推荐

高性能并发队列Disruptor使用详解

基本概念Disruptor是一个高性能的异步处理框架,是一个轻量的Java消息服务JMS,能够在无锁的情况下实现队列的并发操作Disruptor使用环形数组实现了类似队列的功能,并且是一个有界队列....

Disruptor一个高性能队列_java高性能队列

Disruptor一个高性能队列前言说到队列比较熟悉的可能是ArrayBlockingQueue、LinkedBlockingQueue这两个有界队列,大多应用在线程池中使用能保证线程安全,但其安全性...

谈谈防御性编程_防御性策略

防御性编程对于程序员来说是一种良好的代码习惯,是为了保护自己的程序在不可未知的异常下,避免带来更大的破坏性崩溃,使得程序在错误发生时,依然能够云淡风轻的处理,但很多程序员入行很多年,写出的代码依然都是...

有人敲门,开水开了,电话响了,孩子哭了,你先顾谁?

前言哎呀,这种情况你肯定遇到过吧!正在家里忙活着,突然——咚咚咚有人敲门,咕噜咕噜开水开了,铃铃铃电话响了,哇哇哇孩子又哭了...我去,四件事一起来,人都懵了!你说先搞哪个?其实这跟我们写Java多线...

面试官:线程池如何按照core、max、queue的执行顺序去执行?

前言这是一个真实的面试题。前几天一个朋友在群里分享了他刚刚面试候选者时问的问题:"线程池如何按照core、max、queue的执行循序去执行?"。我们都知道线程池中代码执行顺序是:co...

深入剖析 Java 中线程池的多种实现方式

在当今高度并发的互联网软件开发领域,高效地管理和利用线程资源是提升程序性能的关键。Java作为一种广泛应用于后端开发的编程语言,为我们提供了丰富的线程池实现方式。今天,就让我们深入探讨Java中...

并发编程之《彻底搞懂Java线程》_java多线程并发解决方案详解

目录引言一、核心概念:线程是什么?...

Redis怎么实现延时消息_redis实现延时任务

一句话总结Redis可通过有序集合(ZSET)实现延时消息:将消息作为value,到期时间戳作为score存入ZSET。消费者轮询用ZRANGEBYSCORE获取到期消息,配合Lua脚本保证原子性获取...

CompletableFuture真的用对了吗?盘点它最容易被误用的5个场景

在Java并发编程中,CompletableFuture是处理异步任务的利器,但不少开发者在使用时踩过这些坑——线上服务突然雪崩、异常悄无声息消失、接口响应时间翻倍……本文结合真实案例,拆解5个最容易...

接口性能优化技巧,有点硬_接口性能瓶颈

背景我负责的系统到2021年初完成了功能上的建设,开始进入到推广阶段。随着推广的逐步深入,收到了很多好评的同时也收到了很多对性能的吐槽。刚刚收到吐槽的时候,我们的心情是这样的:...

禁止使用这5个Java类,每一个背后都有一段&quot;血泪史&quot;

某电商平台的支付系统突然报警:大量订单状态异常。排查日志发现,同一笔订单被重复支付了三次。事后复盘显示,罪魁祸首竟是一行看似无害的SimpleDateFormat代码。在Java开发中,这类因使用不安...

无锁队列Disruptor原理解析_无锁队列实现原理

队列比较队列...

Java并发队列与容器_java 并发队列

【前言:无论是大数据从业人员还是Java从业人员,掌握Java高并发和多线程是必备技能之一。本文主要阐述Java并发包下的阻塞队列和并发容器,其实研读过大数据相关技术如Spark、Storm等源码的,...

线程池工具及拒绝策略的使用_线程池处理策略

线程池的拒绝策略若线程池中的核心线程数被用完且阻塞队列已排满,则此时线程池的资源已耗尽,线程池将没有足够的线程资源执行新的任务。为了保证操作系统的安全,线程池将通过拒绝策略处理新添加的线程任务。...

【面试题精讲】ArrayBlockingQueue 和 LinkedBlockingQueue 区别?

有的时候博客内容会有变动,首发博客是最新的,其他博客地址可能会未同步,认准...