Java读取csv文件的三种方式

简介: Java读取csv文件的三种方式

最近需要进行对数据库的数据进行导入导出,之前使用的方式是,同时接到两台数据库上,进行读写操作;

但是,如果不能直接连数据库,可以使用另一种方法;

从源数据库导出数据到文件
将数据导入到目标数据库;

从数据库导出数据到文件,最佳的方式应该是导出成csv文件;

什么是csv文件:

csv全称“Comma-Separated Values”,是一种逗号分隔值格式的文件,是一种用来存储数据的纯文本格式文件。CSV文件由任意数目的记录组成,记录间以某种换行符分隔;每条记录由字段组成,字段间的分隔符是其它字符或字符串。它们大多使用逗号字符来分隔(或定界)数据,但有时使用其他字符,如分号等;

导出数据库数据

打开数据库可视化工具;
查询所需数据,选择导出数据;
选择导出文件格式为csv

读取csv文件数据

使用JAVA读取CSV文件的三种方式:

  • 使用BufferedReader逐行读取
  • 使用CsvReader读取
  • 使用univocity解析csv文件

使用BUfferReader读取文件

因为csv本质上是一个文本文件,所以可以使用File中的reader方法读取数据;

读取代码如下:

    public static void readFileByLine(String filepath) throws Exception {
        BufferedReader reader = new BufferedReader(new FileReader(filepath));
        String line = null;
        if((line = reader.readLine())!= null) {
            System.out.println(line); //第一行
            line = reader.readLine();
            System.out.println(line); //第二行
            for (String text: line.split(",")) {
                System.out.println(text);
            }
        }
        reader.close();
    }

在读取csv文件时,对于不换行的文件没问题,但是遇到有些csv文件会换行,就会有问题;所以不太建议使用这个方式;

使用csvReader

  • 引入依赖:
net.sourceforge.javacsv:javacsv:2.0

CsvReader可以逐行读取文件记录;
可以使用 readHeaders()读取表头
使用readRecord()读取记录
使用getVaules()以数组形式获取行记录

具体代码如下:

import com.csvreader.CsvReader;

    public static void readByCsvReader(String filePath) throws Exception {

        CsvReader csvReader = new CsvReader(filePath, ',', Charset.defaultCharset());
        csvReader.readHeaders(); //读取表头
        if(csvReader.readRecord()){
            //读取一行数据
            String[] vs = csvReader.getValues();
            for (String v:vs) {
                System.out.println(v);
            }
        }
        csvReader.close();
    }

在javacsv中,还有一个CSVWriter可以写数据到csv文件中。
使用起来比较简单,只需要 调用

csvWriter.writeRecord(values);

传递一个数组,写入数据到csv文件。且会自动分割;

代码示例如下:

import com.csvreader.CsvWriter;

    public static void writeCsv(String filePath , String[] values) throws  Exception{
        //创建写对象
        CsvWriter csvWriter = new CsvWriter(filePath, ',',Charset.defaultCharset());
        csvWriter.writeRecord(values); //写入数据
        csvWriter.close();
    }

使用Univocity解析CSV文件

Univocity是一个开源的Java项目.针对CSV、TSV定宽文本文件的解析,它以简洁的API开发接口提供了丰富而强大的功能;

引入依赖

compile 'com.univocity:univocity-parsers:2.9.1'

示例代码如下:

import com.univocity.parsers.common.ParsingContext;
import com.univocity.parsers.common.processor.RowProcessor;
import com.univocity.parsers.csv.CsvParser;
import com.univocity.parsers.csv.CsvParserSettings;

public class FileUtils {
    
    /**
     * 
     * */
    public static void readByUnivocity(String filePath){

        CsvParserSettings parserSettings = new CsvParserSettings();
        parserSettings.setDelimiterDetectionEnabled(true); //自动探测分隔符
        //把第一个解析行看作文件中每个列的标题
        parserSettings.setHeaderExtractionEnabled(true);

        RowProcessor rowProcessor = new RowProcessor() {
            @Override
            public void processStarted(ParsingContext context) {
                System.out.println("开始处理");
            }

            @Override
            public void rowProcessed(String[] row, ParsingContext context) {
                System.out.println("开始处理行数据");
                //System.out.println(Arrays.toString(row));
            }

            @Override
            public void processEnded(ParsingContext context) {
                System.out.println(context.currentLine());
            }
        };
        parserSettings.setMaxCharsPerColumn(40960);
        parserSettings.setMaxColumns(51200);
        //parserSettings.setProcessor(rowProcessor);
        CsvParser csvParser =  new CsvParser(parserSettings);
        //csvParser.parse(new File(filePath),Charset.defaultCharset());
        List<String[]> rows = csvParser.parseAll(new File(filePath),Charset.defaultCharset());
        System.out.println(rows.size());
  
    }
}
相关文章
|
6天前
|
JavaScript Java Android开发
在cmd中运行javac编译java文件报错: 编码GBK的不可映射字符、 非法字符: \65279
在cmd中运行javac编译java文件报错: 编码GBK的不可映射字符、 非法字符: \65279
13 1
|
6天前
|
网络协议 JavaScript 前端开发
Java一分钟之-GraalVM Native Image:构建原生可执行文件
【6月更文挑战第13天】GraalVM Native Image是Java开发的创新技术,它将应用编译成独立的原生可执行文件,实现快速启动和低内存消耗,对微服务、桌面应用和嵌入式系统有重大影响。本文讨论了如何使用Native Image,包括常见挑战如反射与动态类加载、静态初始化问题和依赖冲突,并提供了解决方案和代码示例。通过合理规划和利用GraalVM工具,开发者可以克服这些问题,充分利用Native Image提升应用性能。
35 5
|
5天前
|
Java
创建java文件 自动添加作者、时间等信息 – IDEA 技巧
创建java文件 自动添加作者、时间等信息 – IDEA 技巧
7 0
|
5天前
|
Java
java 文件读写实例
java 文件读写实例
|
6天前
|
Java Maven
Java 怎样从 excel 中读取文件、写入文件
Java 怎样从 excel 中读取文件、写入文件
10 0
|
6天前
|
Java
Java读取txt文件和写入txt文件-多种方法-java读写文件-java读写
Java读取txt文件和写入txt文件-多种方法-java读写文件-java读写
36 0
|
6天前
|
IDE 数据可视化 Java
Java基础6-Java文件和Java包结构和常用的jar包(二)
Java基础6-Java文件和Java包结构和常用的jar包(二)
12 0
|
6天前
|
Java Unix 编译器
Java基础6-Java文件和Java包结构和常用的jar包(一)
Java基础6-Java文件和Java包结构和常用的jar包(一)
17 0
|
9天前
|
存储 Java 测试技术
《手把手教你》系列技巧篇(六十九)-java+ selenium自动化测试 - 读取csv文件(详细教程)
【6月更文挑战第10天】本文介绍了如何在Java中读取CSV文件。首先解释了CSV是逗号分隔值的文本文件,常用于数据交换。接着,在项目实战部分,详细说明了如何通过下载并引入opencsv库来读取CSV文件:包括下载jar包、添加到Eclipse项目、创建CSV文件、编写Java代码读取文件内容,并展示了代码执行后的输出结果。文章以一个简单的代码示例展示了如何使用opencsv读取CSV文件中的数据。
10 0
|
10天前
|
Java 测试技术 Apache
《手把手教你》系列技巧篇(六十八)-java+ selenium自动化测试 - 读写excel文件 - 下篇(详细教程)
【6月更文挑战第9天】本文介绍了如何使用Java处理Excel文件中的不同数据类型,包括日期、数字、布尔值和标签(常规字符串)。文章提供了两个示例,分别使用JXL库和Apache POI库来读取Excel文件。
10 1