算法必知 --- 归并排序(优化与案例)

简介: 算法必知 --- 归并排序(优化与案例)

算法描述



使用归并排序进行升序排列。


示例

输入:nums = [5,1,1,2,0,0]
输出:[0,0,1,1,2,5]


算法设计



基本思路:借助额外空间,合并两个有序数组,得到更长的有序数组。例如:「力扣」第 88 题:合并两个有序数组


核心函数:mergeSort函数(分治思想)和merge函数(合并有序数组),分治过程一定情况下可以实现并行化。


算法优化



  • 优化1:小区间采用插入排序


Java 源码里面也有类似这种操作,「小区间」的长度是个超参数,需要测试决定,我这里参考了 JDK 源码;


  • 优化2:两个数组本身有序,无需合并


左边界大于右边界或者要归并的两个数组已经有序,无需进行merge过程。


  • 优化3:全程使用一份临时数组进行两个数组的合并操作


避免创建临时数组和销毁的消耗,避免计算下标偏移量。即使用System.arraycopy(nums, left, tmp, left, right - left + 1)拷贝到tmp临时数组。


  • 优化4:位运算求解中间值


对Java语言,left + right >>> 1 在可能存在溢出的情况下,结论也是正确的。


代码实现


class Solution {
    // 列表大小大于或等于该值,将优先使用归并排序,否则使用插入排序
    private static final int INSERTION_SORT_THRESHOLD = 7;
    public int[] sortArray(int[] nums) {
        int n = nums.length;
        int[] tmp = new int[n];
        mergeSort(nums, 0, n - 1, tmp);
        return nums;
    }
    private void mergeSort(int[] nums, int left, int right, int[] tmp) {
        if (right - left <= INSERTION_SORT_THRESHOLD) {
            insertionSort(nums, left, right);
            return;
        }
        // int mid = left + (right - left) / 2;
        int mid = left + right >>> 1;
        mergeSort(nums, left, mid, tmp);
        mergeSort(nums, mid + 1, right, tmp);
        // 如果子区间本身有序,则无需合并
        if (nums[mid] <= nums[mid + 1]) {
            return;
        }
        merge(nums, left, mid, right, tmp);
    }
    private void insertionSort(int[] nums, int left, int right) {
        for (int i = left + 1; i <= right; ++i) {
            int tmp = nums[i];
            int j = i;
            while (j > left && nums[j - 1] > tmp) {
                nums[j] = nums[j - 1];
                j--;
            }
            nums[j] = tmp;
        }
    }
    private void merge(int[] nums, int left, int mid, int right, int[] tmp) {
        System.arraycopy(nums, left, tmp, left, right - left + 1);
        int i = left;
        int j = mid + 1;
        for (int k = left; k <= right; k++) {
            if (i == mid + 1) {
                nums[k] = tmp[j];
                j++;
            } else if (j == right + 1) {
                nums[k] = tmp[i];
                i++;
            } else if (tmp[i] <= tmp[j]) {
                // 注意写成 < 就丢失了稳定性(相同元素原来靠前的排序以后依然靠前)
                nums[k] = tmp[i];
                i++;
            } else {
                // tmp[i] > tmp[j]:先放较小的元素
                nums[k] = tmp[j];
                j++;
            }
        }
    }
}


注意点(补充):


  • 实现归并排序的时候,要特别注意,不要把这个算法实现成非稳定排序,区别就在 <=< ,已在代码中注明。
  • 「归并排序」比「快速排序」好的一点是,它借助了额外空间,可以实现「稳定排序」,Java 里对于「对象数组」的排序任务,就是使用归并排序(的升级版 TimSort,在这里就不多做介绍)。
  • 时间复杂度:O(N log N),这里 N 是数组的长度;空间复杂度:O(N),辅助数组与输入数组规模相当。
  • 「归并排序」也有「原地归并排序」和「不使用递归」的归并排序,但是我个人觉得不常用,编码、调试都有一定难度。
  • 经典问题:


应用拓展



示例1:「力扣」第 88 题合并两个有序数组


注意:归并排序的merge过程,但是考虑不使用额外空间,技巧:倒序遍历两个数组(先添加较大的)


代码实现:

class Solution {
    public void merge(int[] nums1, int m, int[] nums2, int n) {
        int i = m - 1;
        int j = n - 1;
        int merge = m + n - 1;
        while (i > -1 || j > -1) {
            if (j < 0) {
                nums1[merge--] = nums1[i--];
            } else if (i < 0) {
                nums1[merge--] = nums2[j--];
            } else if (nums1[i] > nums2[j]) {
                nums1[merge--] = nums1[i--];
            } else {
                nums1[merge--] = nums2[j--];
            }
        }
    }
}


示例2:《剑指 Offer》第 51 题:数组中的逆序对


注意:暴力解超时!必然进行时间优化,这里利用归并排序分治思想(降低时间复杂度)+合并两个数组的有序性(统计逆序对的个数)


  • 排序的过程是必要的,正是因为排序才加速下一轮的统计逆序对的速度。
  • 分治先统计左右区间的逆序对,再计算跨区间的逆序对(这里我们采用在第2个区间归并时,即j指向元素归并回去的时候,统计逆序数 == 前面还没有归并回去的元素个数:mid - i + 1)即以左边的元素比当前大的元素个数,统计逆序对。


ps:这里不要求排序所以需要拷贝一份nums数组。


ps2:以右侧小于当前元素个数的方式统计逆序数的个数,类似下面的315题,只需要改成归并i,统计逆序数 == j - mid + 1,如果只是统计逆序数,左右无区别,如本题。


代码实现:

class Solution {
    public int reversePairs(int[] nums) {
        int n = nums.length;
        if (n < 2) {
            return 0;
        }
        int[] copy = new int[n];
        System.arraycopy(nums, 0, copy, 0, n);
        int[] tmp = new int[n];
        return reversePairs(copy, 0, n - 1, tmp);
    }
    private int reversePairs(int[] copy, int left, int right, int[] tmp) {
        if (left >= right) {
            return 0;
        }
        int mid = left + ((right - left) >> 1);
        int leftPairs = reversePairs(copy, left, mid, tmp);
        int rightPairs = reversePairs(copy, mid + 1, right, tmp);
        if (copy[mid] <= copy[mid + 1]) {
            return leftPairs + rightPairs;
        }
        int crossPairs = mergeAndCount(copy, left, mid, right, tmp);
        return leftPairs + rightPairs + crossPairs;
    }
    private int mergeAndCount(int[] copy, int left, int mid, int right, int[] tmp) {
        System.arraycopy(copy, left, tmp, left, right - left + 1);
        int i = left;
        int j = mid + 1;
        int count = 0;
        for (int k = left; k <= right; k++) {
            if (i == mid + 1) {
                copy[k] = tmp[j];
                j++;
            } else if (j == right + 1) {
                copy[k] = tmp[i];
                i++;
            } else if (tmp[i] <= tmp[j]) {
                copy[k] = tmp[i];
                i++;
            } else {
                copy[k] = tmp[j];
                j++;
                // 当j指向元素归并进去,计算逆序数
                count += (mid - i + 1); 
            }
        }
        return count;
    }
}


示例3:「力扣」第 315 题:计算右侧小于当前元素的个数


注意:数据量很大,暴力必然超时!与上题相同,即每个位置逆序数的个数。


  • 需要在「前有序数组」的元素归并的时候,数一数「后有序数组」已经归并回去的元素的个数,因为这些已经出列的元素都比当前出列的元素要(严格)小;
  • 一个元素在算法的执行过程中位置发生变化,我们还想定位它,可以使用「索引数组」(记录元素下标),技巧在于:「原始数组」不变,用于比较两个元素的大小,真正位置变化的是「索引数组」的位置;归并回去时,方便知道哪个下标的元素。
  • ps: res[indexes[k]] += (j - mid - 1); 理解:indexes[k] 表示当前 k 下标对应的原始数组的下标是多少,外面再套一层 res[indexes[k]] 记录了原始数组的对应下标右侧小于当前元素的个数,在排序的过程中,每一次计算一部分,所以是 += 。整个算法完成以后,indexes 映射成输入数组的元素的值以后,是有序的。


代码实现:核心:比较数值,操作下标

class Solution {
    public List<Integer> countSmaller(int[] nums) {
        List<Integer> result = new ArrayList<>();
        int n = nums.length;
        if (n < 1) {
            return result;
        }
        int[] ans = new int[n];
        int[] tmp = new int[n];
        int[] indexs = new int[n];
        for (int i = 0; i < n; i++) {
            indexs[i] = i;
        }
        countSmaller(nums, 0, n - 1, tmp, indexs, ans);
        for (int num : ans) {
            result.add(num);
        }
        return result;
    }
    private void countSmaller(int[] nums, int left, int right, int[] tmp, int[] indexs, int[] ans) {
        if (left == right) {
            return;
        }
        int mid = left + (right - left) / 2;
        countSmaller(nums, left, mid, tmp, indexs, ans);
        countSmaller(nums, mid + 1, right, tmp, indexs, ans);
        // 已经有序,不存在逆序对,不需要进行合并
        if (nums[indexs[mid]] <= nums[indexs[mid + 1]]) {
            return;
        }
        mergeAndCount(nums, left, mid, right, tmp, indexs, ans);
    }
    private void mergeAndCount(int[] nums, int left, int mid, int right, int[] tmp, int[] indexs, int[] ans) {
        System.arraycopy(indexs, left, tmp, left, right - left + 1);
        int i = left;
        int j = mid + 1;
        for (int k = left; k <= right; k++) {
            if (i == mid + 1) {
                indexs[k] = tmp[j];
                j++;
            } else if (j == right + 1) {
                indexs[k] = tmp[i];
                i++;
                // 后有序数组已经归并完成,一定比当前要归并的元素小
                ans[indexs[k]] += (right - mid);
            } else if (nums[tmp[i]] <= nums[tmp[j]]) {
                indexs[k] = tmp[i];
                i++;
                // 当前元素要归并,后有序数组已经归并的元素一定比当前元素小
                ans[indexs[k]] += (j - mid - 1);
            } else {
                indexs[k] = tmp[j];
                j++;
            }
        }
    }
}


示例4:计算数组的小和(计算左侧大于当前元素总和) 要求时间复杂度O(NlogN),空间复杂度O(N)

1左边比1小的数,没有;
3左边比3小的数,1;
4左边比4小的数,1、3;
2左边比2小的数,1;
5左边比5小的数,1、3、4、2;
所以小和为1+1+3+1+1+3+4+2=16


代码实现:

import java.util.Scanner;
public class Main {
    // 运行超时
    public static long solution1(int[] nums) {
        long sum = 0;
        for (int i = 0; i < nums.length; i++) {
            for (int j = 0; j < i; j++) {
                if (nums[j] <= nums[i]) {
                    sum += nums[j];
                }
            }
        }
        return sum;
    }
    public static long solution(int[] nums) {
        int n = nums.length;
        if (n < 1) {
            return 0;
        }
        int[] tmp = new int[n];
        return mergeSort(nums, 0, n - 1, tmp);
    }
    private static long mergeSort(int[] nums, int left, int right, int[] tmp) {
        if (left == right) {
            return 0;
        }
        int mid = left + (right - left) / 2;
        return mergeSort(nums, left, mid, tmp) +
               mergeSort(nums, mid + 1, right, tmp) + 
               mergeAndSum(nums, left, mid, right, tmp);
    }
    private static long mergeAndSum(int[] nums, int left, int mid, int right, int[] tmp) {
        System.arraycopy(nums, left, tmp, left, right - left + 1);
        int i = left;
        int j = mid + 1;
        long smallSum = 0;
        for (int k = left; k <= right; k++) {
            if (i == mid + 1) {
                nums[k] = tmp[j];
                j++;
            } else if (j == right + 1) {
                nums[k] = tmp[i];
                i++;
            } else if (tmp[i] <= tmp[j]) {
                // i进行归并时,左边小于右边产生小和(当前加入的一定比右边还未加入的元素小)
                smallSum += tmp[i] * (right - j + 1);
                nums[k] = tmp[i];
                i++;
            } else {
                nums[k] = tmp[j];
                j++;
            }
        }
        return smallSum;
    }
    public static void main(String[] args) {
        Scanner sc = new Scanner(System.in);
        int n = sc.nextInt();
        int[] nums = new int[n];
        int i = 0;
        while (n-- > 0) {
            nums[i++] = sc.nextInt();
        }
        System.out.println(solution(nums));
//         System.out.println(solution1(nums));
    }
}


相关文章
|
6天前
|
存储 关系型数据库 分布式数据库
PolarDB的PolarStore存储引擎以其高效的索引结构、优化的数据压缩算法、出色的事务处理能力著称
PolarDB的PolarStore存储引擎以其高效的索引结构、优化的数据压缩算法、出色的事务处理能力著称。本文深入解析PolarStore的内部机制及优化策略,包括合理调整索引、优化数据分布、控制事务规模等,旨在最大化其性能优势,提升数据存储与访问效率。
18 5
|
20天前
|
算法 调度
基于遗传模拟退火混合优化算法的车间作业最优调度matlab仿真,输出甘特图
车间作业调度问题(JSSP)通过遗传算法(GA)和模拟退火算法(SA)优化多个作业在并行工作中心上的加工顺序和时间,以最小化总完成时间和机器闲置时间。MATLAB2022a版本运行测试,展示了有效性和可行性。核心程序采用作业列表表示法,结合遗传操作和模拟退火过程,提高算法性能。
|
21天前
|
人工智能 算法 大数据
Linux内核中的调度算法演变:从O(1)到CFS的优化之旅###
本文深入探讨了Linux操作系统内核中进程调度算法的发展历程,聚焦于O(1)调度器向完全公平调度器(CFS)的转变。不同于传统摘要对研究背景、方法、结果和结论的概述,本文创新性地采用“技术演进时间线”的形式,简明扼要地勾勒出这一转变背后的关键技术里程碑,旨在为读者提供一个清晰的历史脉络,引领其深入了解Linux调度机制的革新之路。 ###
|
2月前
|
人工智能 算法 数据安全/隐私保护
基于遗传优化的SVD水印嵌入提取算法matlab仿真
该算法基于遗传优化的SVD水印嵌入与提取技术,通过遗传算法优化水印嵌入参数,提高水印的鲁棒性和隐蔽性。在MATLAB2022a环境下测试,展示了优化前后的性能对比及不同干扰下的水印提取效果。核心程序实现了SVD分解、遗传算法流程及其参数优化,有效提升了水印技术的应用价值。
|
1月前
|
存储 缓存 算法
优化轮询算法以提高资源分配的效率
【10月更文挑战第13天】通过以上这些优化措施,可以在一定程度上提高轮询算法的资源分配效率,使其更好地适应不同的应用场景和需求。但需要注意的是,优化策略的选择和实施需要根据具体情况进行详细的分析和评估,以确保优化效果的最大化。
|
2月前
|
并行计算 算法 IDE
【灵码助力Cuda算法分析】分析共享内存的矩阵乘法优化
本文介绍了如何利用通义灵码在Visual Studio 2022中对基于CUDA的共享内存矩阵乘法优化代码进行深入分析。文章从整体程序结构入手,逐步深入到线程调度、矩阵分块、循环展开等关键细节,最后通过带入具体值的方式进一步解析复杂循环逻辑,展示了通义灵码在辅助理解和优化CUDA编程中的强大功能。
|
2月前
|
存储 缓存 算法
前端算法:优化与实战技巧的深度探索
【10月更文挑战第21天】前端算法:优化与实战技巧的深度探索
22 1
|
2月前
|
机器学习/深度学习 算法 数据安全/隐私保护
基于贝叶斯优化CNN-LSTM网络的数据分类识别算法matlab仿真
本项目展示了基于贝叶斯优化(BO)的CNN-LSTM网络在数据分类中的应用。通过MATLAB 2022a实现,优化前后效果对比明显。核心代码附带中文注释和操作视频,涵盖BO、CNN、LSTM理论,特别是BO优化CNN-LSTM网络的batchsize和学习率,显著提升模型性能。
|
2月前
|
数据采集 缓存 算法
算法优化的常见策略有哪些
【10月更文挑战第20天】算法优化的常见策略有哪些
|
2月前
|
缓存 分布式计算 监控
算法优化:提升程序性能的艺术
【10月更文挑战第20天】算法优化:提升程序性能的艺术