开发者社区> 技能实验室> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

Java读取csv文件的三种方式

简介: Java读取csv文件的三种方式
+关注继续查看

最近需要进行对数据库的数据进行导入导出,之前使用的方式是,同时接到两台数据库上,进行读写操作;

但是,如果不能直接连数据库,可以使用另一种方法;

从源数据库导出数据到文件
将数据导入到目标数据库;

从数据库导出数据到文件,最佳的方式应该是导出成csv文件;

什么是csv文件:

csv全称“Comma-Separated Values”,是一种逗号分隔值格式的文件,是一种用来存储数据的纯文本格式文件。CSV文件由任意数目的记录组成,记录间以某种换行符分隔;每条记录由字段组成,字段间的分隔符是其它字符或字符串。它们大多使用逗号字符来分隔(或定界)数据,但有时使用其他字符,如分号等;

导出数据库数据

打开数据库可视化工具;
查询所需数据,选择导出数据;
选择导出文件格式为csv

读取csv文件数据

使用JAVA读取CSV文件的三种方式:

  • 使用BufferedReader逐行读取
  • 使用CsvReader读取
  • 使用univocity解析csv文件

使用BUfferReader读取文件

因为csv本质上是一个文本文件,所以可以使用File中的reader方法读取数据;

读取代码如下:

    public static void readFileByLine(String filepath) throws Exception {
        BufferedReader reader = new BufferedReader(new FileReader(filepath));
        String line = null;
        if((line = reader.readLine())!= null) {
            System.out.println(line); //第一行
            line = reader.readLine();
            System.out.println(line); //第二行
            for (String text: line.split(",")) {
                System.out.println(text);
            }
        }
        reader.close();
    }

在读取csv文件时,对于不换行的文件没问题,但是遇到有些csv文件会换行,就会有问题;所以不太建议使用这个方式;

使用csvReader

  • 引入依赖:
net.sourceforge.javacsv:javacsv:2.0

CsvReader可以逐行读取文件记录;
可以使用 readHeaders()读取表头
使用readRecord()读取记录
使用getVaules()以数组形式获取行记录

具体代码如下:

import com.csvreader.CsvReader;

    public static void readByCsvReader(String filePath) throws Exception {

        CsvReader csvReader = new CsvReader(filePath, ',', Charset.defaultCharset());
        csvReader.readHeaders(); //读取表头
        if(csvReader.readRecord()){
            //读取一行数据
            String[] vs = csvReader.getValues();
            for (String v:vs) {
                System.out.println(v);
            }
        }
        csvReader.close();
    }

在javacsv中,还有一个CSVWriter可以写数据到csv文件中。
使用起来比较简单,只需要 调用

csvWriter.writeRecord(values);

传递一个数组,写入数据到csv文件。且会自动分割;

代码示例如下:

import com.csvreader.CsvWriter;

    public static void writeCsv(String filePath , String[] values) throws  Exception{
        //创建写对象
        CsvWriter csvWriter = new CsvWriter(filePath, ',',Charset.defaultCharset());
        csvWriter.writeRecord(values); //写入数据
        csvWriter.close();
    }

使用Univocity解析CSV文件

Univocity是一个开源的Java项目.针对CSV、TSV定宽文本文件的解析,它以简洁的API开发接口提供了丰富而强大的功能;

引入依赖

compile 'com.univocity:univocity-parsers:2.9.1'

示例代码如下:

import com.univocity.parsers.common.ParsingContext;
import com.univocity.parsers.common.processor.RowProcessor;
import com.univocity.parsers.csv.CsvParser;
import com.univocity.parsers.csv.CsvParserSettings;

public class FileUtils {
    
    /**
     * 
     * */
    public static void readByUnivocity(String filePath){

        CsvParserSettings parserSettings = new CsvParserSettings();
        parserSettings.setDelimiterDetectionEnabled(true); //自动探测分隔符
        //把第一个解析行看作文件中每个列的标题
        parserSettings.setHeaderExtractionEnabled(true);

        RowProcessor rowProcessor = new RowProcessor() {
            @Override
            public void processStarted(ParsingContext context) {
                System.out.println("开始处理");
            }

            @Override
            public void rowProcessed(String[] row, ParsingContext context) {
                System.out.println("开始处理行数据");
                //System.out.println(Arrays.toString(row));
            }

            @Override
            public void processEnded(ParsingContext context) {
                System.out.println(context.currentLine());
            }
        };
        parserSettings.setMaxCharsPerColumn(40960);
        parserSettings.setMaxColumns(51200);
        //parserSettings.setProcessor(rowProcessor);
        CsvParser csvParser =  new CsvParser(parserSettings);
        //csvParser.parse(new File(filePath),Charset.defaultCharset());
        List<String[]> rows = csvParser.parseAll(new File(filePath),Charset.defaultCharset());
        System.out.println(rows.size());
  
    }
}

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
java解析CSV文件三种方法(openCSV)
java解析CSV文件三种方法(openCSV)
0 0
将CSV的数据发送到kafka(java版)
java版,读取CSV数据发送到kafka
0 0
java实现csv大文件拆分,每个小文件都有标题行
java实现csv大文件拆分,每个小文件都有标题行
0 0
Java写CSV文件的正确姿势
Java写CSV文件的正确姿势
0 0
Java上传csv文件踩坑记
## 前言 最近在做交通优化分析工具的产品时,有一个需求是用户上传一份包含路段信息的csv文件,后端需要解析csv的文件内容并将信息插入数据库中。这是一个常规的操作,也不复杂,但是在实现的过程中却踩到了一个utf-8 BOM的坑,随手记录一下。 ## 实现方式 完整的实现方式如下: 1. 在spring中通过`MultipartFile file`这个对象来接受前端传过来的文件
1283 0
想在Java中实现Excel和Csv的导出吗?看这就对了
前言 最近在项目中遇到一个需求,需要后端提供一个下载Csv和Excel表格的接口。这个接口接收前端的查询参数,针对这些参数对数据库做查询操作。将查询到的结果生成Excel和Csv文件,再以字节流的形式返回给前端。
2516 0
Java实现读取CSV
Java实现读取CSV
2838 0
Java CSV操作(导出和导入)
CSV是逗号分隔文件(Comma Separated Values)的首字母英文缩写,是一种用来存储数据的纯文本格式,通常用于电子表格或数据库软件。在 CSV文件中,数据“栏”以逗号分隔,可允许程序通过读取文件为数据重新创建正确的栏结构,并在每次遇到逗号时开始新的一栏。
792 0
java 生成 csv文件
一、csv文件   逗号分隔值(Comma-Separated Values,CSV,有时也称为字符分隔值,因为分隔字符也可以不是逗号),其文件以纯文本形式存储表格数据(数字和文本)。纯文本意味着该文件是一个字符序列,不含必须像二进制数字那样被解读的数据。
773 0
Java实现单词计数MapReduce
本文分享实现单词计数MapReduce的方法
0 0
+关注
技能实验室
python java vue css typescript
文章
问答
文章排行榜
最热
最新
相关电子书
更多
JAVA 应用排查全景图
立即下载
Java工程师必读手册
立即下载
Java应用提速(速度与激情)
立即下载