linux工具之jq

简介:

简介

在linux下进行日常的开发时,我们经常需要对json格式的数据进行处理分析。jq是一个开源的JSON格式数据处理工具,它提供了很多灵活的语法,功能非常强大。

安装

  • macOS:
brew install jq
  • Ubuntu
apt-get install jq

jq语法

基础用法

假设文本test_json中有如下字符串

{
    "name":"xiaoming",
    "age":21,
    "birthday":"10th August",
    "email":"yj.xxxx@xxxx.com",
    "skills":[
        {
            "name":"C++",
            "level":2
        },
        {
            "name":"Python",
            "level":1
        }
    ]
}

通过key筛选

jq 表达式

cat test_json | jq ".name"

输出

"xiaoming"

通过index筛选

jq 表达式

cat test_json | jq ".skills[0]"

输出

{
  "name": "C++",
  "level": 2
}

遍历数组

jq表达式

cat test_json | jq ".skills[]"

输出

{
  "name": "C++",
  "level": 2
}
{
  "name": "Python",
  "level": 1
}

通过Pipe("|")筛选

jq表达式

cat test_json | jq ".skills[] | .level"

输出

2
1

构造数组Array

jq表达式

cat test_json | jq "[.age, .email]"

输出

[
  21,
  "yj.xxxx@xxxx.com"
]

构造Mapping

jq表达式

cat test_json | jq "{name, skills_2 : .skills}"

输出

{
  "name": "xiaoming",
  "skills_2": [
    {
      "name": "C++",
      "level": 2
    },
    {
      "name": "Python",
      "level": 1
    }
  ]
}

jq表达式

cat test_json | jq "{(.name): .skills}"

输出

{
  "xiaoming": [
    {
      "name": "C++",
      "level": 2
    },
    {
      "name": "Python",
      "level": 1
    }
  ]
}

内建操作符和函数

加法

jq表达式

cat test_json | jq ".age + 1"

输出

22

字符拼接

cat test_json | jq ".age + .name"

输出

"yj.xxxx@xxxx.comxiaoming"

减法 -

jq表达式

echo '["xml", "yaml", "json"]' | jq '. - ["xml", "yaml"]'

输出

[
  "json"
]

Length

jq表达式

echo '[[1,2], "string", {"a":2}, null]' | jq '[.[]| length]'

输出

[
  2,
  6,
  1,
  0
]

keys

jq表达式

cat test_json | jq 'keys'

输出

[
  "age",
  "birthday",
  "email",
  "name",
  "skills"
]

in

jq表达式

echo '["foo", "bar"]' | jq '.[] | in({"foo": 42})'

输出

true
false

map

jq表达式

echo '[1,2,3]' | jq 'map(.+1)'

输出

[
  2,
  3,
  4
]

map_values

jq表达式

echo '{"a": 1, "b": 2, "c": 3}' | jq 'map_values(.+1)'

输出

{
  "a": 2,
  "b": 3,
  "c": 4
}

del

js表达式

echo '{"foo": 42, "bar": 9001, "baz": 42}' | jq "del(.foo)"

输出

{
  "bar": 9001,
  "baz": 42
}

select

jq表达式

echo '[{"id": "first", "val": 1}, {"id": "second", "val": 2}]' | jq '.[] | select(.id == "second")'

输出

{
  "id": "second",
  "val": 2
}

any

jq 表达式

echo '[true, false]' | jq 'any'

输出

true

all

jq表达式

echo '[true, false]' | jq 'all'

输出

false

min、max

jq表达式

echo '[5,4,2,7]' | jq 'min'

输出

2

sort、sort_by

jq表达式

echo '[8,3,null,6]' | jq 'sort'

输出

[
  null,
  3,
  6,
  8
]

jq表达式

echo '[{"foo":4, "bar":10}, {"foo":3, "bar":100}, {"foo":2, "bar":1}]' | jq 'sort_by(.foo)'

输出

[
  {
    "foo": 2,
    "bar": 1
  },
  {
    "foo": 3,
    "bar": 100
  },
  {
    "foo": 4,
    "bar": 10
  }
]

index

jq表达式

echo '["a","b", "c"]' | jq 'index("b")'

输出

1

json

jq 表达式

echo '["a","b","c"]' | jq 'join(";")'

输出

"a;b;c"

条件判断

jq 表达式

echo 2 | jq 'if . == 0 then  "zero" elif . == 1 then "one" else  "many" end'

输出

"many"

参考

目录
相关文章
|
8月前
|
安全 Linux Shell
四、Linux核心工具:Vim, 文件链接与SSH
要想在Linux世界里游刃有余,光会“走路”还不够,还得配上几样“高级装备”。首先是Vim编辑器,它像一把瑞士军刀,让你能在命令行里高效地修改文件。然后要懂“软硬链接”,软链接像个快捷方式,硬链接则是给文件起了个别名。最后,SSH是你的“传送门”,不仅能让你安全地远程登录服务器,还能用scp轻松传输文件,设置好密钥更能实现免-密登录,极大提升效率。
539 5
|
12月前
|
Linux 开发工具
7种比较Linux中文本文件的最佳工具
7种比较Linux中文本文件的最佳工具
7种比较Linux中文本文件的最佳工具
|
8月前
|
Unix Linux 程序员
Linux文本搜索工具grep命令使用指南
以上就是对Linux环境下强大工具 `grep` 的基础到进阶功能介绍。它不仅能够执行简单文字查询任务还能够处理复杂文字处理任务,并且支持强大而灵活地正则表达规范来增加查询精度与效率。无论您是程序员、数据分析师还是系统管理员,在日常工作中熟练运用该命令都将极大提升您处理和分析数据效率。
644 16
|
8月前
|
安全 Linux iOS开发
SonarQube Server 2025 Release 5 (macOS, Linux, Windows) - 代码质量、安全与静态分析工具
SonarQube Server 2025 Release 5 (macOS, Linux, Windows) - 代码质量、安全与静态分析工具
342 0
SonarQube Server 2025 Release 5 (macOS, Linux, Windows) - 代码质量、安全与静态分析工具
|
10月前
|
缓存 监控 Linux
Linux系统性能调优技巧和相关工具
Linux 作为一种应用应展和系统服务的优选操作系统,在处理性能和端到端点评估上持有出色表现。但是,在处理进程或系统处于低效状态时,性能调优就显得十分重要。本文将探讨一些 Linux 系统性能调优的常用技巧,并介绍相关工具
272 1
Linux系统性能调优技巧和相关工具
|
10月前
|
Linux 数据安全/隐私保护 iOS开发
推荐Linux环境下效能优良的双向文件同步工具
综合上述条件,对于Linux环境下的双向文件同步需求,Unison 和 Syncthing 是两个非常出色的选择。它们都有良好的社区支持和文档资源,适用于不同规模的环境,从个人使用到商业部署。Unison 特别适合那些需要手动干预同步过程、需要处理文件冲突解决的场景。而 Syncthing 更加现代化,适合需要自动、实时的数据同步与备份的环境。对于选择哪一个,这将取决于个人的使用场景和具体需求。
1064 16
|
12月前
|
Ubuntu 搜索推荐 Linux
详解Ubuntu的strings与grep命令:Linux开发的实用工具。
这就是Ubuntu中的strings和grep命令,透明且强大。我希望你喜欢这个神奇的世界,并能在你的Linux开发旅程上,通过它们找到你的方向。记住,你的电脑是你的舞台,在上面你可以做任何你想做的事,只要你敢于尝试。
509 32
|
9月前
|
数据采集 编解码 运维
一文讲完说懂 WowKey -- WowKey 是一款 Linux 类设备的命令行(CLT)运维工具
WowKey 是一款面向 Linux 类设备的命令行运维工具,支持自动登录、批量执行及标准化维护,适用于企业、团队或个人管理多台设备,显著提升运维效率与质量。
|
自然语言处理 数据库 iOS开发
DBeaver Ultimate Edtion 25.0 Multilingual (macOS, Linux, Windows) - 通用数据库工具
DBeaver Ultimate Edtion 25.0 Multilingual (macOS, Linux, Windows) - 通用数据库工具
928 12
DBeaver Ultimate Edtion 25.0 Multilingual (macOS, Linux, Windows) - 通用数据库工具