Java 使用线程把数据库导出为excel

简介: 这是一个demo,内有不足请谅解

这个demo的主题是 使用EasyExcel把数据库导出为excel,多少条为一个excel文件,并把这些文件打包到一个固定位置,然后下载这个包文件

目前各种参数都是写死的,使用的是 生产消费者模式  在一个队列中放数据,取数据。

放一下关键代码:

启动项目时启动一个线程:

@Component//被spring容器管理publicclassMyApplicationRunnerimplementsApplicationRunner {
@Overridepublicvoidrun(ApplicationArgumentsargs) throwsException {
System.out.println("-------------->"+"项目启动,now="+newDate());
ExcelThread.startExcelThread();
    }
}

这是一个全局的阻塞队列:

publicclassQueueUtil {
publicstaticBlockingQueue<Object>queue=newLinkedBlockingQueue<>();
publicstaticObjectget() throwsException{
//        return queue.poll(2, TimeUnit.SECONDS); //不阻塞returnqueue.take(); //阻塞    }
publicstaticvoidput(Objectobj) throwsException{
queue.put(obj);
    }
}

这是Controller   中的导出方法,传一个表名进来,条件可选:

@RequestMapping(value= {"/export/{tableName}"})
publicvoidexport(@PathVariableStringtableName ,Stringname){
//        System.out.println(tableName+"---"+name.length());  user---0if (name.length()==0){
service.exportZIP(tableName);
        }else {
service.exportZIP(tableName, name);
        }
    }

这是Service  这里往队列中存入数据:

publicvoidexportZIP(StringtableName){
try {
QueueUtil.put(tableName);
    }catch (Exceptione){
e.printStackTrace();
System.out.println("存入数据失败");
    }
}
publicvoidexportZIP(StringtableName,Stringname){
try {
QueueUtil.put(tableName+":"+name);
    }catch (Exceptione){
e.printStackTrace();
System.out.println("存入数据失败");
    }
}

线程类  在这把队列中的数据取出来:

publicclassExcelThreadextendsThread{
privatestaticStringPATH="/file/";
privatestaticStringExcelName="用户信息表";
privatestaticStringTYPE=".xlsx";
//    @Value("${zip.name}")privatestaticStringZIP_NAME="用户信息";
privatestaticintSIZE=5000 ;
privateBlockingQueuequeue=QueueUtil.queue;
publicstaticExcelThreadexcelThread=null;
privateFilesServicefilesservice= (FilesService) ApplicationContextUtil.getBean("filesServiceImpl");
publicstaticvoidstartExcelThread(){
if (excelThread==null){
excelThread=newExcelThread();
        }
excelThread.start();
    }
@Overridepublicvoidrun() {
try {
while (true) {
Stringstr= (String) QueueUtil.get(); //《============String[] split=str.split(":");
zip(split);
            }
        } catch (Exceptione) {
e.printStackTrace();
        }
    }
publicvoidzip(String[] str) {
OutputStreamoutputStream;
ZipOutputStreamzipOutputStream;
Serviceservice= (Service) ApplicationContextUtil.getBean(str[0]+"ServiceImpl");
longdate=System.currentTimeMillis();
ZIP_NAME+=date;
Stringpath=System.getProperty("user.dir") +PATH+ZIP_NAME+".zip";
filesservice.alter();
intid=filesservice.save(newFiles(ZIP_NAME,newDate(date)));
try {
outputStream=newFileOutputStream(path);
zipOutputStream=newZipOutputStream(outputStream);
intcount=0;
if (str.length>1){
count=service.count(str[1]);
            }else {
count=service.count();
            }
count=count/SIZE+(count%SIZE==0?0:1);
for (Integeri=0; i<count; i++) {
byte[] buf=newbyte[1024];
List<User>userList;
if (str.length>1){
userList=service.selectPage(i+1,5000,str[1]);
                }else {
userList=service.selectPage(i+1,5000).getRecords();
                }
byte[] content=newFileUtil().excelTableStream(userList).toByteArray(); //返回一个excel文件ByteArrayInputStreamis=newByteArrayInputStream(content);
BufferedInputStreambis=newBufferedInputStream(is);
zipOutputStream.putNextEntry(newZipEntry(ExcelName+(i+1)+TYPE)); //压缩文件条目intlen;
while ((len=bis.read(buf)) >0) {
zipOutputStream.write(buf, 0, len);
                }
zipOutputStream.closeEntry();
bis.close();
is.close();
zipOutputStream.flush();
System.out.println(ExcelName+(i+1)+TYPE+"导出完成");
            }
zipOutputStream.close();
outputStream.close();
        } catch (Exceptione) {
e.printStackTrace();
        }finally {
filesservice.updateState(id,PATH+ZIP_NAME+".zip");
        }
    }
publicstaticvoidmain(String[] args) {
Datenow=newDate(); // 创建一个Date对象,获取当前时间// 指定格式化格式SimpleDateFormatf=newSimpleDateFormat("yyyy年MM月dd日 HH点mm分ss秒");
System.out.println(f.format(now)); // 将当前时间袼式化为指定的格式    }
}

把一个结果集生产一个excel:

publicByteArrayOutputStreamexcelTableStream(List<User>userList) {
try {
ByteArrayOutputStreambyteArrayOutputStream=newByteArrayOutputStream();
EasyExcel.write(byteArrayOutputStream, User.class)
//.registerWriteHandler(new LongestMatchColumnWidthStyleStrategy()) 自动列宽  数字不起作用                .sheet("用户信息")
                .doWrite(() -> {
// 查询数据returnuserList;
                });
returnbyteArrayOutputStream;
    } catch (Exceptione) {
e.printStackTrace();
    }
returnnull;
}


先上效果图,在列表页面点击导出按钮,然后在一个文件表中添加一条数据,查看导出状态,完成后有一个下载地址

image.png

image.png

目录
相关文章
|
10月前
|
JSON 网络协议 安全
【Java】(10)进程与线程的关系、Tread类;讲解基本线程安全、网络编程内容;JSON序列化与反序列化
几乎所有的操作系统都支持进程的概念,进程是处于运行过程中的程序,并且具有一定的独立功能,进程是系统进行资源分配和调度的一个独立单位一般而言,进程包含如下三个特征。独立性动态性并发性。
441 1
|
10月前
|
JSON 网络协议 安全
【Java基础】(1)进程与线程的关系、Tread类;讲解基本线程安全、网络编程内容;JSON序列化与反序列化
几乎所有的操作系统都支持进程的概念,进程是处于运行过程中的程序,并且具有一定的独立功能,进程是系统进行资源分配和调度的一个独立单位一般而言,进程包含如下三个特征。独立性动态性并发性。
411 1
|
11月前
|
数据采集 存储 弹性计算
高并发Java爬虫的瓶颈分析与动态线程优化方案
高并发Java爬虫的瓶颈分析与动态线程优化方案
Java 数据库 Spring
460 0
|
11月前
|
算法 Java
Java多线程编程:实现线程间数据共享机制
以上就是Java中几种主要处理多线程序列化资源以及协调各自独立运行但需相互配合以完成任务threads 的技术手段与策略。正确应用上述技术将大大增强你程序稳定性与效率同时也降低bug出现率因此深刻理解每项技术背后理论至关重要.
633 16
|
10月前
|
Java 调度 数据库
Python threading模块:多线程编程的实战指南
本文深入讲解Python多线程编程,涵盖threading模块的核心用法:线程创建、生命周期、同步机制(锁、信号量、条件变量)、线程通信(队列)、守护线程与线程池应用。结合实战案例,如多线程下载器,帮助开发者提升程序并发性能,适用于I/O密集型任务处理。
844 0
|
10月前
|
Java
如何在Java中进行多线程编程
Java多线程编程常用方式包括:继承Thread类、实现Runnable接口、Callable接口(可返回结果)及使用线程池。推荐线程池以提升性能,避免频繁创建线程。结合同步与通信机制,可有效管理并发任务。
341 6
|
Java API 微服务
为什么虚拟线程将改变Java并发编程?
为什么虚拟线程将改变Java并发编程?
525 83
|
机器学习/深度学习 消息中间件 存储
【高薪程序员必看】万字长文拆解Java并发编程!(9-2):并发工具-线程池
🌟 ​大家好,我是摘星!​ 🌟今天为大家带来的是并发编程中的强力并发工具-线程池,废话不多说让我们直接开始。
465 0
|
Linux
Linux编程: 在业务线程中注册和处理Linux信号
本文详细介绍了如何在Linux中通过在业务线程中注册和处理信号。我们讨论了信号的基本概念,并通过完整的代码示例展示了在业务线程中注册和处理信号的方法。通过正确地使用信号处理机制,可以提高程序的健壮性和响应能力。希望本文能帮助您更好地理解和应用Linux信号处理,提高开发效率和代码质量。
359 17