Java读取csv文件的三种方式

简介: Java读取csv文件的三种方式

最近需要进行对数据库的数据进行导入导出,之前使用的方式是,同时接到两台数据库上,进行读写操作;

但是,如果不能直接连数据库,可以使用另一种方法;

从源数据库导出数据到文件
将数据导入到目标数据库;

从数据库导出数据到文件,最佳的方式应该是导出成csv文件;

什么是csv文件:

csv全称“Comma-Separated Values”,是一种逗号分隔值格式的文件,是一种用来存储数据的纯文本格式文件。CSV文件由任意数目的记录组成,记录间以某种换行符分隔;每条记录由字段组成,字段间的分隔符是其它字符或字符串。它们大多使用逗号字符来分隔(或定界)数据,但有时使用其他字符,如分号等;

导出数据库数据

打开数据库可视化工具;
查询所需数据,选择导出数据;
选择导出文件格式为csv

读取csv文件数据

使用JAVA读取CSV文件的三种方式:

  • 使用BufferedReader逐行读取
  • 使用CsvReader读取
  • 使用univocity解析csv文件

使用BUfferReader读取文件

因为csv本质上是一个文本文件,所以可以使用File中的reader方法读取数据;

读取代码如下:

    public static void readFileByLine(String filepath) throws Exception {
        BufferedReader reader = new BufferedReader(new FileReader(filepath));
        String line = null;
        if((line = reader.readLine())!= null) {
            System.out.println(line); //第一行
            line = reader.readLine();
            System.out.println(line); //第二行
            for (String text: line.split(",")) {
                System.out.println(text);
            }
        }
        reader.close();
    }

在读取csv文件时,对于不换行的文件没问题,但是遇到有些csv文件会换行,就会有问题;所以不太建议使用这个方式;

使用csvReader

  • 引入依赖:
net.sourceforge.javacsv:javacsv:2.0

CsvReader可以逐行读取文件记录;
可以使用 readHeaders()读取表头
使用readRecord()读取记录
使用getVaules()以数组形式获取行记录

具体代码如下:

import com.csvreader.CsvReader;

    public static void readByCsvReader(String filePath) throws Exception {

        CsvReader csvReader = new CsvReader(filePath, ',', Charset.defaultCharset());
        csvReader.readHeaders(); //读取表头
        if(csvReader.readRecord()){
            //读取一行数据
            String[] vs = csvReader.getValues();
            for (String v:vs) {
                System.out.println(v);
            }
        }
        csvReader.close();
    }

在javacsv中,还有一个CSVWriter可以写数据到csv文件中。
使用起来比较简单,只需要 调用

csvWriter.writeRecord(values);

传递一个数组,写入数据到csv文件。且会自动分割;

代码示例如下:

import com.csvreader.CsvWriter;

    public static void writeCsv(String filePath , String[] values) throws  Exception{
        //创建写对象
        CsvWriter csvWriter = new CsvWriter(filePath, ',',Charset.defaultCharset());
        csvWriter.writeRecord(values); //写入数据
        csvWriter.close();
    }

使用Univocity解析CSV文件

Univocity是一个开源的Java项目.针对CSV、TSV定宽文本文件的解析,它以简洁的API开发接口提供了丰富而强大的功能;

引入依赖

compile 'com.univocity:univocity-parsers:2.9.1'

示例代码如下:

import com.univocity.parsers.common.ParsingContext;
import com.univocity.parsers.common.processor.RowProcessor;
import com.univocity.parsers.csv.CsvParser;
import com.univocity.parsers.csv.CsvParserSettings;

public class FileUtils {
    
    /**
     * 
     * */
    public static void readByUnivocity(String filePath){

        CsvParserSettings parserSettings = new CsvParserSettings();
        parserSettings.setDelimiterDetectionEnabled(true); //自动探测分隔符
        //把第一个解析行看作文件中每个列的标题
        parserSettings.setHeaderExtractionEnabled(true);

        RowProcessor rowProcessor = new RowProcessor() {
            @Override
            public void processStarted(ParsingContext context) {
                System.out.println("开始处理");
            }

            @Override
            public void rowProcessed(String[] row, ParsingContext context) {
                System.out.println("开始处理行数据");
                //System.out.println(Arrays.toString(row));
            }

            @Override
            public void processEnded(ParsingContext context) {
                System.out.println(context.currentLine());
            }
        };
        parserSettings.setMaxCharsPerColumn(40960);
        parserSettings.setMaxColumns(51200);
        //parserSettings.setProcessor(rowProcessor);
        CsvParser csvParser =  new CsvParser(parserSettings);
        //csvParser.parse(new File(filePath),Charset.defaultCharset());
        List<String[]> rows = csvParser.parseAll(new File(filePath),Charset.defaultCharset());
        System.out.println(rows.size());
  
    }
}
相关文章
|
9月前
|
Java Unix Go
【Java】(8)Stream流、文件File相关操作,IO的含义与运用
Java 为 I/O 提供了强大的而灵活的支持,使其更广泛地应用到文件传输和网络编程中。!但本节讲述最基本的和流与 I/O 相关的功能。我们将通过一个个例子来学习这些功能。
331 1
|
Java
java小工具util系列5:java文件相关操作工具,包括读取服务器路径下文件,删除文件及子文件,删除文件夹等方法
java小工具util系列5:java文件相关操作工具,包括读取服务器路径下文件,删除文件及子文件,删除文件夹等方法
337 9
|
监控 Java 应用服务中间件
高级java面试---spring.factories文件的解析源码API机制
【11月更文挑战第20天】Spring Boot是一个用于快速构建基于Spring框架的应用程序的开源框架。它通过自动配置、起步依赖和内嵌服务器等特性,极大地简化了Spring应用的开发和部署过程。本文将深入探讨Spring Boot的背景历史、业务场景、功能点以及底层原理,并通过Java代码手写模拟Spring Boot的启动过程,特别是spring.factories文件的解析源码API机制。
562 2
|
12月前
|
监控 Java API
Java语言按文件创建日期排序及获取最新文件的技术
这段代码实现了文件创建时间的读取、文件列表的获取与排序以及获取最新文件的需求。它具备良好的效率和可读性,对于绝大多数处理文件属性相关的需求来说足够健壮。在实际应用中,根据具体情况,可能还需要进一步处理如访问权限不足、文件系统不支持某些属性等边界情况。
484 14
|
人工智能 自然语言处理 Java
FastExcel:开源的 JAVA 解析 Excel 工具,集成 AI 通过自然语言处理 Excel 文件,完全兼容 EasyExcel
FastExcel 是一款基于 Java 的高性能 Excel 处理工具,专注于优化大规模数据处理,提供简洁易用的 API 和流式操作能力,支持从 EasyExcel 无缝迁移。
3946 65
FastExcel:开源的 JAVA 解析 Excel 工具,集成 AI 通过自然语言处理 Excel 文件,完全兼容 EasyExcel
|
存储 Java 数据安全/隐私保护
Java技术栈揭秘:Base64加密和解密文件的实战案例
以上就是我们今天关于Java实现Base64编码和解码的实战案例介绍。希望能对你有所帮助。还有更多知识等待你去探索和学习,让我们一同努力,继续前行!
704 5
|
12月前
|
存储 Java 编译器
深入理解Java虚拟机--类文件结构
本内容介绍了Java虚拟机与Class文件的关系及其内部结构。Class文件是一种与语言无关的二进制格式,包含JVM指令集、符号表等信息。无论使用何种语言,只要能生成符合规范的Class文件,即可在JVM上运行。文章详细解析了Class文件的组成,包括魔数、版本号、常量池、访问标志、类索引、字段表、方法表和属性表等,并说明其在Java编译与运行过程中的作用。
339 0
|
12月前
|
存储 人工智能 Java
java之通过Http下载文件
本文介绍了使用Java实现通过文件链接下载文件到本地的方法,主要涉及URL、HttpURLConnection及输入输出流的操作。
782 0
|
前端开发 Cloud Native Java
Java||Springboot读取本地目录的文件和文件结构,读取服务器文档目录数据供前端渲染的API实现
博客不应该只有代码和解决方案,重点应该在于给出解决方案的同时分享思维模式,只有思维才能可持续地解决问题,只有思维才是真正值得学习和分享的核心要素。如果这篇博客能给您带来一点帮助,麻烦您点个赞支持一下,还可以收藏起来以备不时之需,有疑问和错误欢迎在评论区指出~
Java||Springboot读取本地目录的文件和文件结构,读取服务器文档目录数据供前端渲染的API实现
|
网络协议 安全 Java
实现Java语言的文件断点续传功能的技术方案。
像这样,我们就完成了一项看似高科技、实则亲民的小工程。这样的技术实现不仅具备实用性,也能在面对网络不稳定的挑战时,稳稳地、不失乐趣地完成工作。
606 0