最有效的方式来遍历CSV并为另一列中的每个唯一值求和一列的值

我有一个CSV文件，其中包含500,000行数据和22列。此数据代表了一年中美国的所有商业航班。我的任务是查找飞行数据集中飞行距离最长的飞机的机尾号。第5列包含每次飞行的飞行员的机尾编号。列22包含行进的总距离。

请extractQ3在下面查看我的方法。首先，HashMap使用createHashMap()方法为整个CSV 创建一个。然后，我运行一个for循环以识别数据集中的每个唯一尾号，并将它们存储在名为的数组中tailNumbers。然后，对于每个唯一的尾号，我遍历整个整数Hashmap以计算该尾号的总距离。

该代码在较小的数据集上运行良好，但是一旦将大小增加到500,000行，该代码将变得效率极低，并且需要花费很长时间才能运行。谁能为我提供更快的方法呢？

public class FlightData {

    HashMap<String,String[]>  dataMap;

        public static void main(String[] args) {

            FlightData map1 = new FlightData();
            map1.dataMap = map1.createHashMap();

            String answer = map1.extractQ3(map1);  
}

        public String extractQ3(FlightData map1) {
            ArrayList<String> tailNumbers = new ArrayList<String>();
            ArrayList<Integer> tailMiles = new ArrayList<Integer>();
            //Filling the Array with all tail numbers
            for (String[] value : map1.dataMap.values()) {
                if(Arrays.asList(tailNumbers).contains(value[4])) {  
                } else {
                    tailNumbers.add(value[4]);
                }
            }

            for (int i = 0; i < tailNumbers.size(); i++) {
                String tempName = tailNumbers.get(i); 
                int miles = 0;

                for (String[] value : map1.dataMap.values()) {
                    if(value[4].contentEquals(tempName) && value[19].contentEquals("0")) {
                        miles = miles + Integer.parseInt(value[21]);
                    }  
                }
                tailMiles.add(miles);     
            }

            Integer maxVal = Collections.max(tailMiles);
            Integer maxIdx = tailMiles.indexOf(maxVal);
            String maxPlane = tailNumbers.get(maxIdx);

            return maxPlane;
        }




        public HashMap<String,String[]> createHashMap() {
            File flightFile = new File("flights_small.csv");
            HashMap<String,String[]> flightsMap = new HashMap<String,String[]>();

            try {
            Scanner s = new Scanner(flightFile);
            while (s.hasNextLine()) {

                    String info = s.nextLine();
                    String [] piecesOfInfo = info.split(",");
                    String flightKey = piecesOfInfo[4] + "_" + piecesOfInfo[2] + "_" + piecesOfInfo[11]; //Setting the Key
                    String[] values = Arrays.copyOfRange(piecesOfInfo, 0, piecesOfInfo.length);

                    flightsMap.put(flightKey, values);

            }


            s.close();
            }


           catch (FileNotFoundException e)
           {
             System.out.println("Cannot open: " + flightFile);
           }

            return flightsMap;
        }
}

问题来源：Stack Overflow