linux工具之jq

在linux下进行日常的开发时，我们经常需要对json格式的数据进行处理分析。jq是一个开源的JSON格式数据处理工具，它提供了很多灵活的语法，功能非常强大。

• macOS:

brew install jq

• Ubuntu

apt-get install jq

• 其他参考 官网

基础用法

假设文本test_json中有如下字符串

{ "name":"xiaoming", "age":21, "birthday":"10th August", "email":"yj.xxxx@xxxx.com", "skills":[ { "name":"C++", "level":2 }, { "name":"Python", "level":1 } ] }

通过key筛选

jq 表达式

cat test_json | jq ".name"

输出

"xiaoming"

通过index筛选

jq 表达式

cat test_json | jq ".skills[0]"

输出

{ "name": "C++", "level": 2 }

遍历数组

jq表达式

cat test_json | jq ".skills[]"

输出

{ "name": "C++", "level": 2 } { "name": "Python", "level": 1 }

通过Pipe（"|"）筛选

jq表达式

cat test_json | jq ".skills[] | .level"

输出

2 1

构造数组Array

jq表达式

cat test_json | jq "[.age, .email]"

输出

[ 21, "yj.xxxx@xxxx.com" ]

构造Mapping

jq表达式

cat test_json | jq "{name, skills_2 : .skills}"

输出

{ "name": "xiaoming", "skills_2": [ { "name": "C++", "level": 2 }, { "name": "Python", "level": 1 } ] }

jq表达式

cat test_json | jq "{(.name): .skills}"

输出

{ "xiaoming": [ { "name": "C++", "level": 2 }, { "name": "Python", "level": 1 } ] }

内建操作符和函数

加法

jq表达式

cat test_json | jq ".age + 1"

输出

22

字符拼接

cat test_json | jq ".age + .name"

输出

"yj.xxxx@xxxx.comxiaoming"

减法 -

jq表达式

echo '["xml", "yaml", "json"]' | jq '. - ["xml", "yaml"]'

输出

[ "json" ]

Length

jq表达式

echo '[[1,2], "string", {"a":2}, null]' | jq '[.[]| length]'

输出

[ 2, 6, 1, 0 ]

keys

jq表达式

cat test_json | jq 'keys'

输出

[ "age", "birthday", "email", "name", "skills" ]

in

jq表达式

echo '["foo", "bar"]' | jq '.[] | in({"foo": 42})'

输出

true false

map

jq表达式

echo '[1,2,3]' | jq 'map(.+1)'

输出

[ 2, 3, 4 ]

map_values

jq表达式

echo '{"a": 1, "b": 2, "c": 3}' | jq 'map_values(.+1)'

输出

{ "a": 2, "b": 3, "c": 4 }

del

js表达式

echo '{"foo": 42, "bar": 9001, "baz": 42}' | jq "del(.foo)"

输出

{ "bar": 9001, "baz": 42 }

select

jq表达式

echo '[{"id": "first", "val": 1}, {"id": "second", "val": 2}]' | jq '.[] | select(.id == "second")'

输出

{ "id": "second", "val": 2 }

any

jq 表达式

echo '[true, false]' | jq 'any'

输出

true

all

jq表达式

echo '[true, false]' | jq 'all'

输出

false

min、max

jq表达式

echo '[5,4,2,7]' | jq 'min'

输出

2

sort、sort_by

jq表达式

echo '[8,3,null,6]' | jq 'sort'

输出

[ null, 3, 6, 8 ]

jq表达式

echo '[{"foo":4, "bar":10}, {"foo":3, "bar":100}, {"foo":2, "bar":1}]' | jq 'sort_by(.foo)'

输出

[ { "foo": 2, "bar": 1 }, { "foo": 3, "bar": 100 }, { "foo": 4, "bar": 10 } ]

index

jq表达式

echo '["a","b", "c"]' | jq 'index("b")'

输出

1

json

jq 表达式

echo '["a","b","c"]' | jq 'join(";")'

输出

"a;b;c"

条件判断

jq 表达式

echo 2 | jq 'if . == 0 then "zero" elif . == 1 then "one" else "many" end'

输出

"many"

• 官方参考文档