Future与FutureTask源码解析,接口阻塞问题及解决方案

简介: 【11月更文挑战第5天】在Java开发中,多线程编程是提高系统并发性能和资源利用率的重要手段。然而,多线程编程也带来了诸如线程安全、死锁、接口阻塞等一系列复杂问题。本文将深度剖析多线程优化技巧、Future与FutureTask的源码、接口阻塞问题及解决方案,并通过具体业务场景和Java代码示例进行实战演示。

引言

在Java开发中,多线程编程是提高系统并发性能和资源利用率的重要手段。然而,多线程编程也带来了诸如线程安全、死锁、接口阻塞等一系列复杂问题。本文将深度剖析多线程优化技巧、Future与FutureTask的源码、接口阻塞问题及解决方案,并通过具体业务场景和Java代码示例进行实战演示。

一、多线程优化技巧

1.1 线程池的使用与调优

线程池是一种预先创建一定数量线程的容器,当有任务需要执行时,从线程池中获取可用线程来执行任务,任务完成后线程不会被销毁,而是返回线程池等待下一个任务。线程池的使用可以显著减少线程创建和销毁的开销,提高系统资源利用率和响应性。

1.1.1 线程池的配置参数

  • 核心线程数(corePoolSize):线程池中的核心线程数,即使在空闲状态下也不会被回收。
  • 最大线程数(maximumPoolSize):线程池允许的最大线程数,当任务队列满且核心线程都在忙时,会创建新的线程直到达到最大线程数。
  • 队列容量(queueCapacity):任务队列的长度,当线程池中的线程数达到核心线程数时,新任务会被放入队列中等待执行。
  • 存活时间(keepAliveTime):当线程池中的线程数超过核心线程数时,多余的空闲线程在存活时间到达后会被回收。

1.1.2 线程池的类型

Java提供了多种线程池实现,通过Executors工厂类可以方便地创建不同类型的线程池:

  • newFixedThreadPool:创建固定大小的线程池。
  • newCachedThreadPool:创建一个可缓存的线程池,线程数量不固定,会根据需要创建新线程或复用已有线程。
  • newSingleThreadExecutor:创建一个单线程的线程池,所有任务按顺序在一个线程中执行。
  • newScheduledThreadPool:创建一个支持定时和周期性任务执行的线程池。

1.1.3 线程池的调优

  • 考虑CPU核心数:线程数量通常与CPU核心数相关。对于计算密集型任务,线程数量可以设置为CPU核心数或CPU核心数+1,以充分利用CPU资源。
  • 考虑任务类型:对于I/O密集型任务,由于线程在等待I/O操作时会处于阻塞状态,线程数量可以适当增加,一般可以设置为2*CPU核心数。
  • 考虑系统资源:还需要考虑系统的内存、网络带宽等资源限制,避免创建过多线程导致系统资源不足。

1.2 分而治之思想

分而治之是一种将复杂问题分解为若干个子问题分别解决的思想。在多线程编程中,可以利用分而治之的思想将一个任务分解为若干个子任务,并指派专门的线程来并发执行这些子任务。

1.2.1 基于数据的分割

将程序的输入数据分解为若干个规模较小的数据,并利用若干个工作线程并发处理这些分解后的数据。例如,在处理大规模日志文件时,可以将日志文件按行分割,每个线程处理一部分数据。

1.2.2 基于任务的分割

将程序的处理任务分解为若干子任务,并分配若干子线程并发执行这些子任务。例如,在进行大规模计算时,可以将计算任务分解为多个子任务,每个子任务由一个线程执行。

二、Future与FutureTask源码解析

2.1 Future接口

Future表示一个异步计算的结果,并提供了一些方法来检测计算是否完成、等待完成以及获取结果。

java复制代码
public interface Future<V> {  
boolean cancel(boolean mayInterruptIfRunning);  
boolean isCancelled();  
boolean isDone();  
    V get() throws InterruptedException, ExecutionException;  
    V get(long timeout, TimeUnit unit) throws InterruptedException, ExecutionException, TimeoutException;  
}

2.2 FutureTask类

FutureTask是Future接口的一个实现类,它实现了RunnableFuture接口,该接口继承了Runnable和Future接口。因此,FutureTask既可以作为Runnable提交给Thread执行,又可以作为Future获取异步计算的结果。

java复制代码
public class FutureTask<V> implements RunnableFuture<V> {  
// 任务状态  
private volatile int state;  
private static final int NEW = 0;  
private static final int COMPLETING = 1;  
private static final int NORMAL = 2;  
private static final int EXCEPTIONAL = 3;  
private static final int CANCELLED = 4;  
private static final int INTERRUPTING = 5;  
private static final int INTERRUPTED = 6;  
// 下层Callable  
private Callable<V> callable;  
// 任务结果  
private Object outcome;  
// 运行线程  
private volatile Thread runner;  
// 等待节点  
private volatile WaitNode waiters;  
// 构造函数  
public FutureTask(Callable<V> callable) {  
if (callable == null) throw new NullPointerException();  
this.callable = callable;  
this.state = NEW;  
    }  
public FutureTask(Runnable runnable, V result) {  
this.callable = Executors.callable(runnable, result);  
this.state = NEW;  
    }  
// run方法  
public void run() {  
if (state != NEW || !UNSAFE.compareAndSwapObject(this, runnerOffset, null, Thread.currentThread()))  
return;  
try {  
            Callable<V> c = callable;  
if (c != null && state == NEW) {  
                V result;  
boolean ran;  
try {  
                    result = c.call();  
                    ran = true;  
                } catch (Throwable ex) {  
                    result = null;  
                    ran = false;  
                    setException(ex);  
                }  
if (ran) set(result);  
            }  
        } finally {  
            runner = null;  
int s = state;  
if (s >= INTERRUPTING)  
                handlePossibleCancellationInterrupt(s);  
        }  
    }  
// set方法  
protected void set(V v) {  
if (UNSAFE.compareAndSwapInt(this, stateOffset, NEW, COMPLETING)) {  
            outcome = v;  
            UNSAFE.putOrderedInt(this, stateOffset, NORMAL);  
            finishCompletion();  
        }  
    }  
// finishCompletion方法  
private void finishCompletion() {  
for (WaitNode q; (q = waiters) != null;) {  
if (UNSAFE.compareAndSwapObject(this, waitersOffset, q, null)) {  
for (;;) {  
Thread t = q.thread;  
if (t != null) {  
                        q.thread = null;  
                        LockSupport.unpark(t);  
                    }  
WaitNode next = q.next;  
if (next == null) break;  
                    q.next = null;  
                    q = next;  
                }  
break;  
            }  
        }  
        done();  
        callable = null;  
    }  
// get方法  
public V get() throws InterruptedException, ExecutionException {  
int s = state;  
if (s <= COMPLETING)  
            s = awaitDone(false, 0L);  
return report(s);  
    }  
public V get(long timeout, TimeUnit unit) throws InterruptedException, ExecutionException, TimeoutException {  
if (unit == null) throw new NullPointerException();  
int s = state;  
if (s <= COMPLETING && (s = awaitDone(true, unit.toNanos(timeout))) <= COMPLETING)  
throw new TimeoutException();  
return report(s);  
    }  
// 其他方法...  
}

三、接口阻塞问题及解决方案

3.1 接口阻塞问题表现

在Java中,接口阻塞问题通常表现为请求发出后长时间无响应,导致用户体验不佳,同时会占用系统资源,影响其他接口的调用,甚至引发连锁反应,导致整个系统瘫痪。

3.2 接口阻塞问题原因

  • I/O操作:如网络请求、文件读写等,这些操作的执行时间不可控,容易导致阻塞。
  • 全局解释器锁(GIL):在Python中,GIL限制了多线程的并发性能,导致长时间操作会阻塞其他线程。
  • 设计不当:在应用架构中未能合理使用异步编程或多线程技术,导致请求处理不高效。

3.3 解决方案

3.3.1 多线程处理

通过多线程处理长时间的操作,可以在一定程度上减轻阻塞的问题。例如,在Java中可以使用Thread类或ExecutorService来创建和管理线程。

java复制代码
import java.util.concurrent.ExecutorService;  
import java.util.concurrent.Executors;  
public class TaskExecutor {  
private static final int THREAD_POOL_SIZE = 10;  
private ExecutorService executorService = Executors.newFixedThreadPool(THREAD_POOL_SIZE);  
public void executeTask(Runnable task) {  
        executorService.execute(task);  
    }  
public void shutdown() {  
        executorService.shutdown();  
    }  
public static void main(String[] args) {  
TaskExecutor taskExecutor = new TaskExecutor();  
        taskExecutor.executeTask(() -> {  
// 模拟长时间运行的任务  
try {  
                Thread.sleep(5000);  
            } catch (InterruptedException e) {  
                e.printStackTrace();  
            }  
            System.out.println("Task completed");  
        });  
        taskExecutor.shutdown();  
    }  
}

3.3.2 异步编程

异步编程可以有效地处理非阻塞操作。在Java中,可以使用CompletableFuture来实现异步编程。

java复制代码
import java.util.concurrent.CompletableFuture;  
public class AsyncTask {  
public static void main(String[] args) {  
        CompletableFuture.runAsync(() -> {  
// 模拟长时间运行的任务  
try {  
                Thread.sleep(5000);  
            } catch (InterruptedException e) {  
                e.printStackTrace();  
            }  
            System.out.println("Async task completed");  
        });  
        System.out.println("Main thread continues to execute");  
    }  
}

3.3.3 消息队列

将长时间的任务放入消息队列(如RabbitMQ、Celery)中异步处理,可以极大地改善接口阻塞的问题。以下是一个使用Celery处理异步任务的简单示例。

python复制代码
from celery import Celery  
import time  
app = Celery('tasks', broker='redis://localhost:6379/0')  
@app.task  
def long_running_task():  
    time.sleep(10)  
return "Task completed"
# 在Flask应用中调用Celery任务  
from flask import Flask, jsonify  
from tasks import long_running_task  
app = Flask(__name__)  
@app.route('/task', methods=['POST'])  
def task():  
    long_running_task.delay()  
return jsonify({"status": "Task received, processing..."})  
@app.route('/status', methods=['GET'])  
def status():  
return jsonify({"status": "Processing tasks..."})  
if __name__ == '__main__':  
    app.run(threaded=True)

四、实战示例:多线程文件下载系统

假设我们要开发一个文件下载系统,需要同时处理多个文件的下载任务。下载任务是I/O密集型操作,需要较多的线程来提高并发度。

4.1 系统设计

  • 线程池:使用固定大小的线程池来管理下载任务。
  • 任务队列:使用有界队列来存放待下载的任务。
  • 下载逻辑:每个下载任务由一个线程执行,从指定的URL下载文件并保存到本地。

4.2 代码实现

java复制代码
import java.io.FileOutputStream;  
import java.io.InputStream;  
import java.net.HttpURLConnection;  
import java.net.URL;  
import java.util.concurrent.ArrayBlockingQueue;  
import java.util.concurrent.ThreadPoolExecutor;  
import java.util.concurrent.TimeUnit;  
public class FileDownloader {  
private static final int CORE_POOL_SIZE = 10;  
private static final int MAX_POOL_SIZE = 20;  
private static final int QUEUE_CAPACITY = 50;  
private static final long KEEP_ALIVE_TIME = 60;  
private ThreadPoolExecutor executor;  
public FileDownloader() {  
        executor = new ThreadPoolExecutor(  
                CORE_POOL_SIZE, MAX_POOL_SIZE, KEEP_ALIVE_TIME,  
                TimeUnit.SECONDS, new ArrayBlockingQueue<>(QUEUE_CAPACITY),  
new ThreadPoolExecutor.CallerRunsPolicy()  
        );  
    }  
public void downloadFile(String fileUrl, String savePath) {  
        executor.execute(() -> {  
try {  
URL url = new URL(fileUrl);  
HttpURLConnection connection = (HttpURLConnection) url.openConnection();  
                connection.setRequestMethod("GET");  
try (InputStream inputStream = connection.getInputStream();  
FileOutputStream outputStream = new FileOutputStream(savePath)) {  
byte[] buffer = new byte[1024];  
int bytesRead;  
while ((bytesRead = inputStream.read(buffer)) != -1) {  
                        outputStream.write(buffer, 0, bytesRead);  
                    }  
                }  
                System.out.println("File downloaded: " + savePath);  
            } catch (Exception e) {  
                e.printStackTrace();  
            }  
        });  
    }  
public static void main(String[] args) {  
FileDownloader downloader = new FileDownloader();  
        downloader.downloadFile("http://example.com/file1.zip", "file1.zip");  
        downloader.downloadFile("http://example.com/file2.zip", "file2.zip");  
    }  
}

4.3 系统测试

通过模拟多个文件下载任务,测试系统的并发处理能力和响应性。可以使用JUnit编写测试用例来验证系统的正确性。

java复制代码
import org.junit.Test;  
import static org.junit.Assert.*;  
public class FileDownloaderTest {  
@Test
public void testDownloadFile() {  
FileDownloader downloader = new FileDownloader();  
        downloader.downloadFile("http://example.com/file1.zip", "file1.zip");  
        downloader.downloadFile("http://example.com/file2.zip", "file2.zip");  
// 等待一段时间以确保下载任务完成  
try {  
            Thread.sleep(10000);  
        } catch (InterruptedException e) {  
            e.printStackTrace();  
        }  
// 验证文件是否存在  
        assertTrue(new java.io.File("file1.zip").exists());  
        assertTrue(new java.io.File("file2.zip").exists());  
    }  
}

五、总结

本文通过深度剖析多线程优化技巧、Future与FutureTask源码、接口阻塞问题及解决方案,并通过具体业务场景和Java代码示例进行了实战演示。作为资深Java架构师,掌握这些技术和方法对于提高系统并发性能和资源利用率具有重要意义。希望本文能够为读者在实际开发中提供一些有价值的参考和启示。

相关文章
|
4天前
|
弹性计算 双11 开发者
阿里云ECS“99套餐”再升级!双11一站式满足全年算力需求
11月1日,阿里云弹性计算ECS双11活动全面开启,在延续火爆的云服务器“99套餐”外,CPU、GPU及容器等算力产品均迎来了全年最低价。同时,阿里云全新推出简捷版控制台ECS Lite及专属宝塔面板,大幅降低企业和开发者使用ECS云服务器门槛。
|
21天前
|
存储 弹性计算 人工智能
阿里云弹性计算_通用计算专场精华概览 | 2024云栖大会回顾
阿里云弹性计算产品线、存储产品线产品负责人Alex Chen(陈起鲲)及团队内多位专家,和中国电子技术标准化研究院云计算标准负责人陈行、北京望石智慧科技有限公司首席架构师王晓满两位嘉宾,一同带来了题为《通用计算新品发布与行业实践》的专场Session。本次专场内容包括阿里云弹性计算全新发布的产品家族、阿里云第 9 代 ECS 企业级实例、CIPU 2.0技术解读、E-HPC+超算融合、倚天云原生算力解析等内容,并发布了国内首个云超算国家标准。
阿里云弹性计算_通用计算专场精华概览 | 2024云栖大会回顾
|
3天前
|
人工智能 弹性计算 文字识别
基于阿里云文档智能和RAG快速构建企业"第二大脑"
在数字化转型的背景下,企业面临海量文档管理的挑战。传统的文档管理方式效率低下,难以满足业务需求。阿里云推出的文档智能(Document Mind)与检索增强生成(RAG)技术,通过自动化解析和智能检索,极大地提升了文档管理的效率和信息利用的价值。本文介绍了如何利用阿里云的解决方案,快速构建企业专属的“第二大脑”,助力企业在竞争中占据优势。
|
2天前
|
人工智能 自然语言处理 安全
创新不设限,灵码赋新能:通义灵码新功能深度评测
自从2023年通义灵码发布以来,这款基于阿里云通义大模型的AI编码助手迅速成为开发者心中的“明星产品”。它不仅为个人开发者提供强大支持,还帮助企业团队提升研发效率,推动软件开发行业的创新发展。本文将深入探讨通义灵码最新版本的三大新功能:@workspace、@terminal 和 #team docs,分享这些功能如何在实际工作中提高效率的具体案例。
|
8天前
|
负载均衡 算法 网络安全
阿里云WoSign SSL证书申请指南_沃通SSL技术文档
阿里云平台WoSign品牌SSL证书是由阿里云合作伙伴沃通CA提供,上线阿里云平台以来,成为阿里云平台热销的国产品牌证书产品,用户在阿里云平台https://www.aliyun.com/product/cas 可直接下单购买WoSign SSL证书,快捷部署到阿里云产品中。
1851 6
阿里云WoSign SSL证书申请指南_沃通SSL技术文档
|
11天前
|
Web App开发 算法 安全
什么是阿里云WoSign SSL证书?_沃通SSL技术文档
WoSign品牌SSL证书由阿里云平台SSL证书合作伙伴沃通CA提供,上线阿里云平台以来,成为阿里云平台热销的国产品牌证书产品。
1791 2
|
20天前
|
编解码 Java 程序员
写代码还有专业的编程显示器?
写代码已经十个年头了, 一直都是习惯直接用一台Mac电脑写代码 偶尔接一个显示器, 但是可能因为公司配的显示器不怎么样, 还要接转接头 搞得桌面杂乱无章,分辨率也低,感觉屏幕还是Mac自带的看着舒服
|
26天前
|
存储 人工智能 缓存
AI助理直击要害,从繁复中提炼精华——使用CDN加速访问OSS存储的图片
本案例介绍如何利用AI助理快速实现OSS存储的图片接入CDN,以加速图片访问。通过AI助理提炼关键操作步骤,避免在复杂文档中寻找解决方案。主要步骤包括开通CDN、添加加速域名、配置CNAME等。实测显示,接入CDN后图片加载时间显著缩短,验证了加速效果。此方法大幅提高了操作效率,降低了学习成本。
5391 15
|
14天前
|
人工智能 关系型数据库 Serverless
1024,致开发者们——希望和你一起用技术人独有的方式,庆祝你的主场
阿里云开发者社区推出“1024·云上见”程序员节专题活动,包括云上实操、开发者测评和征文三个分会场,提供14个实操活动、3个解决方案、3 个产品方案的测评及征文比赛,旨在帮助开发者提升技能、分享经验,共筑技术梦想。
1154 152
|
22天前
|
存储 缓存 关系型数据库
MySQL事务日志-Redo Log工作原理分析
事务的隔离性和原子性分别通过锁和事务日志实现,而持久性则依赖于事务日志中的`Redo Log`。在MySQL中,`Redo Log`确保已提交事务的数据能持久保存,即使系统崩溃也能通过重做日志恢复数据。其工作原理是记录数据在内存中的更改,待事务提交时写入磁盘。此外,`Redo Log`采用简单的物理日志格式和高效的顺序IO,确保快速提交。通过不同的落盘策略,可在性能和安全性之间做出权衡。
1585 14