非常实用的5种json数组去重方法,函数实现思路竟是chatgpt帮我写的!

本文涉及的产品
可观测可视化 Grafana 版,10个用户账号 1个月
应用实时监控服务-可观测链路OpenTelemetry版,每月50GB免费额度
可观测监控 Prometheus 版,每月50GB免费额度
简介: 你敢信这5种json数组去重方法的实现思路竟然是chatgpt写的,chatgpt对函数的理解也太准确了吧!

在日常开发中,我们经常会遇到需要去重json数组中重复的数据的场景。json数组去重有很多种方法,比如:双重for循环去重、利用对象属性名不冲突去重,今天我们介绍几个json数组去重的方法。希望能够帮助到大家。

让我们来看看chatgpt跟进封装的函数写出的具体实现思路吧,大家看看是否逻辑清晰,是否一目了然。

方法一 reduce

实现思路

  1. 判断传入的jsonArr是否符合去重的条件,即长度大于等于2,指定了去重字段,且第一个元素是JSON格式数据;
  2. 如果不符合条件,则直接返回原始数组jsonArr;
  3. 如果符合条件,则利用reduce方法遍历jsonArr,对每个元素进行处理,将其与all中的元素进行比较,如果有元素的指定去重字段与next相同,则返回all,否则将next加入到all中;
  4. 返回去重后的数组uniqueArr。
    ```
    /*
    • json数组去重
    • @param: {Array} jsonArr 去重之前的数组
    • @param {String} field 需要去重的字段值
    • @return {Array} 去重之后的数组
      */
      export function uniqueJsonArrByField(jsonArr, field) {
      // 数组长度小于2 或 没有指定去重字段 或 不是json格式数据
      if (jsonArr.length < 2 || !field || typeof jsonArr[0] !== "object") return jsonArr;
      const uniqueArr = jsonArr.reduce((all, next) => all.some((item) => item[field] == next[field]) ? all : [...all, next], []);
      return uniqueArr;
      }

# 方法二 filter和Map
## 实现思路

1. 判断传入的 jsonArr 是否符合去重的条件,即长度大于等于2,指定了去重字段,且第一个元素是 JSON 格式数据;
2. 如果不符合条件,则直接返回原始数组 jsonArr;
3. 如果符合条件,则创建一个空的 Map 对象 res;
4. 利用数组的 filter() 方法遍历 jsonArr 数组,对每个元素进行处理:
- 判断当前元素的指定去重字段值是否已经存在于 res 中,如果已经存在,则说明该元素重复,直接过滤掉;
- 如果该元素的指定去重字段值不存在于 res 中,则将其加入到 res 中,并返回 true;
5.将过滤后的数组作为返回值返回。
```js
/**
 * json数组去重
 * @param  {Array} jsonArr 去重之前的数组
 * @param  {String} field  需要去重的字段值
 * @return {Array}        去重之后的数组
 */
export function uniqueJsonArrByField(jsonArr, field) {
    // 数组长度小于2 或 没有指定去重字段 或 不是json格式数据
    if (jsonArr.length < 2 || !field || typeof jsonArr[0] !== "object") return jsonArr;
    const res = new Map(); // 标识对象
    const uniqueArr = jsonArr.filter((item) => !res.has(item[field]) && res.set(item[field], true));
    return uniqueArr;
}

方法三 变异for

实现思路

  1. 判断传入的 jsonArr 是否符合去重的条件,即长度大于等于2,指定了去重字段,且第一个元素是 JSON 格式数据;
  2. 如果不符合条件,则直接返回原始数组 jsonArr;
  3. 如果符合条件,则创建一个空对象 obj;
  4. 创建一个空数组 uniqueArr;
  5. 利用 for 循环遍历 jsonArr 数组,对每个元素进行处理:
  • 判断当前元素的指定去重字段值是否已经存在于 obj 中,如果已经存在,则说明该元素重复,直接跳过;
  • 如果该元素的指定去重字段值不存在于 obj 中,则将其加入到 uniqueArr 中,并在 obj 中记录该值;
  1. 将去重后的数组作为返回值返回。
    /**
    * json数组去重
    * @param  {Array} jsonArr 去重之前的数组
    * @param  {String} field  需要去重的字段值
    * @return {Array}        去重之后的数组
    */
    export function uniqueJsonArrByField(jsonArr, field) {
         
     // 数组长度小于2 或 没有指定去重字段 或 不是json格式数据
     if (jsonArr.length < 2 || !field || typeof jsonArr[0] !== "object") return jsonArr;
     let obj = {
         }; // 标识对象
     let uniqueArr = [];
     for(let i = 0; i<jsonArr.length; i++) {
          
         if(!obj[jsonArr[i][field]]){
          
             uniqueArr.push(jsonArr[i]);
             obj[jsonArr[i][field]] = true;
         } 
     }
     return uniqueArr;
    }
    

方法四 for + filter

实现思路

  1. 判断传入的 jsonArr 是否符合去重的条件,即长度大于等于2,指定了去重字段,且第一个元素是 JSON 格式数据;
  2. 如果不符合条件,则直接返回原始数组 jsonArr;
  3. 如果符合条件,则创建一个空数组 uniqueArr,并将 jsonArr 中的第一个元素加入到 uniqueArr 中;
  4. 利用 for 循环遍历 jsonArr 数组,对每个元素进行处理:
  • 用 filter() 方法过滤 uniqueArr 中的元素,查找是否存在指定去重字段值与当前元素相同的元素;
  • 如果存在,则说明该元素重复,直接跳过;
  • 如果不存在,则将该元素加入到 uniqueArr 中;
  1. 将去重后的数组作为返回值返回。
    /**
    * json数组去重
    * @param  {Array} jsonArr 去重之前的数组
    * @param  {String} field  需要去重的字段值
    * @return {Array}        去重之后的数组
    */
    export function uniqueJsonArrByField(jsonArr, field) {
         
     // 数组长度小于2 或 没有指定去重字段 或 不是json格式数据
     if (jsonArr.length < 2 || !field || typeof jsonArr[0] !== "object") return jsonArr;
     let uniqueArr = [jsonArr[0]];
     for (let i = 1; i < jsonArr.length; i++) {
         
         let item = jsonArr[i];
         let filterData = uniqueArr.filter(function (f_item) {
         
             return item[field] && f_item[field] == item[field];
         });
         if (filterData.length == 0) {
          // 如果uniqueArr中不存在item
             uniqueArr.push(item);
         }
     }
     return uniqueArr;
    }
    

方法五 for

实现思路

  1. 判断传入的 jsonArr 是否符合去重的条件,即长度大于等于2,指定了去重字段,且第一个元素是 JSON 格式数据;
  2. 如果不符合条件,则直接返回原始数组 jsonArr;
  3. 如果符合条件,则创建一个空数组 uniqueArr,并将 jsonArr 中的第一个元素加入到 uniqueArr 中;
  4. 利用 for 循环遍历 jsonArr 数组,对每个元素进行处理:
  • 创建一个布尔类型的变量 repeat 作为标识位,初始值为 false;
  • 再用一个 for 循环遍历 uniqueArr 数组,对于每个元素都检查它们的指定去重字段值是否与当前元素的指定去重字段值相同;
  • 如果存在,则说明该元素重复,将标识位设为 true 并跳出循环;
  • 如果不存在,则将该元素加入到 uniqueArr 中;
  1. 将去重后的数组作为返回值返回。
/*
 * json数组去重
 * @param: {Array} jsonArr 去重之前的数组
 * @param  {String} field  需要去重的字段值
 * @return {Array}        去重之后的数组
 */
export function uniqueJsonArrByField(jsonArr, field) {
    // 数组长度小于2 或 没有指定去重字段 或 不是json格式数据
    if (jsonArr.length < 2 || !field || typeof jsonArr[0] !== "object") return jsonArr;
    let uniqueArr = [jsonArr[0]];
    for (let i = 1; i < jsonArr.length; i++) {
        let item = jsonArr[i];
        let repeat = false; // 标识位
        for (let j = 0; j < uniqueArr.length; j++) {
            if (item[field] && item[field] == uniqueArr[j][field]) {
                repeat = true;
                break;
            }
        }
        if (!repeat) {
            uniqueArr.push(item);
        }
    }
    return uniqueArr;
}

大家觉得chatgpt根据函数写出的实现思路准确吗?欢迎留言讨论。


✍创作不易,求关注😄,点赞👍,收藏⭐️

相关文章
|
5天前
|
JSON 人工智能 算法
探索大型语言模型LLM推理全阶段的JSON格式输出限制方法
本篇文章详细讨论了如何确保大型语言模型(LLMs)输出结构化的JSON格式,这对于提高数据处理的自动化程度和系统的互操作性至关重要。
|
19天前
|
人工智能
Nature:ChatGPT助力科研工作的方法
生成式AI在科研中的应用日益广泛,不仅提升了论文写作和编辑的效率,还在同行评审和学术反馈中展现出巨大价值。本文探讨了如何将AI作为科研的“合作者”而非“代替者”,并通过提供高质量的提示词和知识储备,让AI更好地服务于学术研究。
54 0
Nature:ChatGPT助力科研工作的方法
|
4月前
|
JSON JavaScript 前端开发
JavaScript实现字符串转json对象的方法
JavaScript实现字符串转json对象的方法
|
1月前
|
JSON 人工智能 算法
探索LLM推理全阶段的JSON格式输出限制方法
文章详细讨论了如何确保大型语言模型(LLMs)输出结构化的JSON格式,这对于提高数据处理的自动化程度和系统的互操作性至关重要。
199 12
|
1月前
|
JSON JavaScript 前端开发
|
2月前
|
数据挖掘
ChatGPT在常用的数据分析方法中的应用(分组分析)
ChatGPT在常用的数据分析方法中的应用(分组分析)
74 1
|
2月前
|
数据挖掘 数据处理
ChatGPT在常用的数据分析方法中的应用(交叉分析)
ChatGPT在常用的数据分析方法中的应用(交叉分析)
58 1
|
3月前
|
XML JSON JavaScript
JSON对象的stringify()和parse()方法使用
本文阐述了JSON对象的`stringify()`和`parse()`方法的用法,包括如何将JavaScript对象转换为JSON字符串,以及如何将JSON字符串解析回JavaScript对象,并讨论了转换过程中需要注意的事项。
JSON对象的stringify()和parse()方法使用
|
2月前
|
自然语言处理
从原理上总结chatGPT的Prompt的方法
从原理上总结chatGPT的Prompt的方法
51 0
|
2月前
|
数据挖掘
ChatGPT在常用的数据分析方法中的应用(对比分析)
ChatGPT在常用的数据分析方法中的应用(对比分析)
62 0