Linux下处理JSON的命令行工具:jq---安装

 JSON是前端编程经常用到的格式。Linux下也有处理处理JSON的神器:jq。
       对于JSON格式而言,jq就像sed/awk/grep这些神器一样的方便,而且,jq没有乱七八糟的依赖,只需要一个binary文件jq,就足矣。

       本篇中,我们来看一下jq的安装。

1、执行yum list| grep jq查看是否有jq安装包。

2、若有,直接安装jq,执行命令:yum -y install jq。

安装完毕后,直接在命令行输入:jq,然后回车,看到以下信息说明安装完毕。

3、若安装过程中,报以下错误,可能是引用的包不在现有的包源中,可以试着切换包源。

4、常用的源:

(1)中科大的yum源:
wget http://centos.ustc.edu.cn/CentOS-Base.repo
 (2)163的yum源:
wget http://mirrors.163.com/.help/CentOS-Base-163.repo
下载Yum的安装包,由于体系结构的不同和包的更新,因此目录和文件名的版本号可能需要调整以下。
#wget  http://mirrors.163.com/centos/5/os/x86_64/CentOS/yum-3.2.22-40.el5.centos.noarch.rpm 
#wget  http://mirrors.163.com/centos/5/os/x86_64/CentOS/yum-fastestmirror-1.1.16-21.el5.centos.noarch.rpm 
#wget  http://mirrors.163.com/centos/5/os/x86_64/CentOS/yum-metadata-parser-1.1.2-4.el5.x86_64.rpm 
(3)sohu的yum源:
wget http://mirrors.sohu.com/help/CentOS-Base-sohu.repo

5、我在安装的时候,上述源都不行,可能是我没有找到合适的源,最后用了epel源。epel的安装见上一篇文章。

JSON是前端编程经常用到的格式,对于PHP或者Python,解析JSON都不是什么大事,尤其是PHP的json_encode和json_decode,干的相当的漂亮。Linux下也有处理处理JSON的神器:jq。
   对于JSON格式而言,jq就像sed/awk/grep这些神器一样的方便,而也,jq没有乱七八糟的依赖,只需要一个binary文件jq,就足矣。下面我们看下jq的使用。
   1 格式化JSON 

  1. manu@manu:~/code/php/json$ cat json_raw.txt 
  2. {"name":"Google","location":{"street":"1600 Amphitheatre Parkway","city":"Mountain View","state":"California","country":"US"},"employees":[{"name":"Michael","division":"Engineering"},{"name":"Laura","division":"HR"},{"name":"Elise","division":"Marketing"}]}

   上面的JSON是PHP json_encode之后,echo出来的字符串,很明显,可读性太差。前一阵子写文档,需要将前后段JSON写入文档,我当时是用是网上的JSON格式化工具做的。事实上,jq就可以检查JSON的合法性,并把JSON格式化成更友好更可读的格式:

  1.     cat json_raw.txt | jq .

    

   看到上图,将一团乱麻的JSON格式化成个更可读的形式。其实背后另外检查了JSON的合法性。如果JSON不合法,jq .会报错。我故意写个错误的JSON:  

  1. manu@manu:~/code/php/json$ cat json_err.txt 
  2. {"name":"Google","location":{"street":"1600 Amphitheatre Parkway","city":"Mountain View","state":"California","country":"US"},"employees":[{"name":"Michael","division":"Engineering"}{"name":"Laura","division":"HR"},{"name":"Elise","division":"Marketing"}]}

   上面JSON中加粗和斜体部分,遗漏了一个逗号,所以这个JSON是错误的,jq轻松的可以轻松的检查出来:

  1.     manu@manu:~/code/php/json$ cat json_err.txt |jq .
  2.     parse error: Expected separator between values at line 1, column 183

    2 JSON parse
   如上图json,jq如何解析JSON,根据key获取value?   

  1.     {
  2.         “key_1”:"value_1",
  3.         “key_2”:"value_2",
  4.     }

    如何根据key获取value? 

  1.     jq '.key'

    
   解析不存在的元素,会返回null

  1.     echo '{"foo": 42, "bar": "less interesting data"}' | jq .nofoo
  2.     null

   3 JSON nested parse(嵌套解析)  

  1.     cat json_raw.txt | jq '.location.state'
  2.     "California"

   4 JSON parse array   

  1.     cat json_raw.txt | jq '.employees[1].name'
  2.     "Laura"

   5 内建函数
  
jq还有一些内建函数如 key,has
  key是用来获取JSON中的key元素的: 

  1. cat json_raw.txt | jq 'keys'
  2. [
  3.   "employees",
  4.   "location",
  5.   "name"
  6. ]

   has是用来是判断是否存在某个key: 

  1. cat json_raw.txt | jq 'has("name")'
  2. true
  3.  
  4. cat json_raw.txt | jq 'has("noexisted")'
  5. false

   与JSON相关的我就暂时介绍到这里,希望进一步了解jq并使用的可以去http://stedolan.github.io/jq/manual/,希望了解源码实现的,可以去https://github.com/stedolan/jq,意料之中的事情是 作者用来flex和bison来parse json。我们的示例JSON来自参考文献第一篇。用google搜索,kernalpanic中有篇文章介绍了jshon和json.sh提供了另外的思路。不过我挺喜欢及

参考文献:
How to parse JSON string via command line on Linux
 jq - command-line JSON processor

猜你喜欢

转载自my.oschina.net/u/3157270/blog/1529669