Linux 中的 JQ 命令使用实例

JSON 是一种数据表示格式，用于在应用程序的不同层之间存储和传输数据；它将数据存储在键：值对中。在文章中，我们将学习使用 JQ  命令 在 shell  中 *** 作和处理 JSON 数据。

如何安装JQ 命令

在 Centos 8中使用下面命令安装jq：

[root@localhost ~]# dnf -y install jq

语法

现在我们可以开始使用 JQ 命令，因为它已经成功安装在我们的系统上，但首先，让我们看一下 JQ 命令的语法：

jq [options]  [file...]

jq [options] --args  [strings...]

jq [options] --jsonargs  [JSON_TEXTS...]

JQ 命令可以用多种不同的方式使用；它可以直接用于 JSON 文件，也可以结合其他几个命令来解释 JSON 数据。JQ 命令可以与不同的过滤器一起使用，例如“.”、“|”、“,”或“.[]”过滤器来组织 JSON 数据。

JQ 命令还采用不同的选项作为参数，例如 --tab、--stream、--indent n、--unbuffered 和 -L 目录选项。JQ 命令的语法乍一看可能很复杂，但阅读整篇文章后您就会熟悉它。

如何使用 JQ 命令组织 JSON 数据

JQ 命令过滤器最简单和常用的特性。它们用于在将 JSON 数据打印到标准输出时对其进行组织和美化。

在这个例子中，我们有一个名为 employee.json 的 JSON 文件，我们需要将数据输出到标准输出：

{"workers":{"name": "John Brooks","id": "003"}}

我们可以使用 cat 命令来显示数据：

[root@localhost ~]# cat employee.json

{"workers":{"name": "John Brooks","id": "003"}}

使用 cat 命令打印到标准输出的数据是无组织和混乱的。我们可以使用 JQ 命令和“.”来组织这些数据，使用.来筛选：

[root@localhost ~]# jq '.' employee.json

{

  "workers": {

    "name": "John Brooks",

    "id": "003"

  }

}

现在，数据变得更有条理、色彩丰富且更易于理解。从 API 访问数据时尤其需要此过滤器；API 中存储的数据可能非常无组织且令人困惑。

如何使用 JQ 命令访问属性

.字段过滤器和 JQ 命令可用于访问 shell 中的对象属性。

如果我们只想访问单个属性并将其打印到标准输出，那么我们可以使用.字段运算符。例如，要访问工人的属性，我们可以使用以下命令：

[root@localhost ~]# jq '.workers' employee.json

{

  "name": "John Brooks",

  "id": "003"

}

我们还可以使用.字段运算符访问属性中存在的项目。要访问工人属性中的名称项，我们将使用：

[root@localhost ~]# jq '.workers.name' employee.json

"John Brooks"

如何使用 JQ 命令访问数组项

我们还可以使用 .[] 运算符访问和输出 JSON 文件中数组中存在的元素。对于这个例子，我们将修改我们的 JSON 文件，添加下面内容：

[{"name": "John Brooks","id": "003"},{"name": "Randy Park","id": "053"},{"name": "Todd Gray","id": "009"}]

查看一下employee.json文件：

[root@localhost ~]# cat employee.json

[{"name": "John Brooks","id": "003"},{"name": "Randy Park","id": "053"},{"name": "Todd Gray","id": "009"}]

要输出 JSON 文件中存在的所有数组，我们将运行以下命令：

[root@localhost ~]# jq '.[]' employee.json

{

  "name": "John Brooks",

  "id": "003"

}

{

  "name": "Randy Park",

  "id": "053"

}

{

  "name": "Todd Gray",

  "id": "009"

}

要仅输出第二个数组，我们可以通过以下方式修改上述命令：

[root@localhost ~]# jq '.[1]' employee.json

{

  "name": "Randy Park",

  "id": "053"

}

请记住，数组从索引 0 开始的。

我们还可以使用 .字段 运算符访问数组中存在的属性。例如，如果我们想访问第三个数组中的 name 属性，那么我们将运行以下命令：

[root@localhost ~]# jq '.[2].name' employee.json

"Todd Gray"

类似地，要访问数组中的所有名称属性，我们可以执行以下命令：

[root@localhost ~]# jq '.[].name' employee.json

"John Brooks"

"Randy Park"

"Todd Gray"

总结

JQ 命令用于将 JSON 数据转换为更易读的格式并将其打印到  Linux  上的标准输出。JQ 命令是围绕过滤器构建的，过滤器用于从 JSON 文件中仅查找和打印所需的数据。

这篇文章介绍几种常用的磁盘阵列技术（Raid0、Raid1、Raid4、Raid5、Raid10、Raid01），演示如何在CentOS7环境下使用mdadm命令去创建和维护磁盘阵列；RAID又称“廉价磁盘冗余阵列”，可以使用硬件和软件两种方式来实现，硬件RAID可以参考购买硬件时附带的参考手册，设置方法与软件RAID有差异；现如今软件RAID大多用作研究和熟悉RAID的工作方式。

Raid有"廉价磁盘冗余阵列"的意思，就是利用多块廉价的硬盘组成磁盘组，让数据分部储存在这些硬盘里面，从而达到读取和写入加速的目的；也可以用作数据的冗余，当某块硬盘损毁后，其他硬盘可以通过冗余数据计算出损坏磁盘的数据，这样就提高了数据储存的安全性。

Raid0数据储存方法如下（假设有两块硬盘D1、D2）:

特点：数据被并行写入每个磁盘，每个磁盘都保存了完整数据的一部分，读取也采用并行方式，磁盘数量越多，读取和写入速度越快。因为没有冗余，一个硬盘坏掉全部数据丢失。至少两块硬盘才能组成Raid0阵列。

容量：所有硬盘之和。

Raid1数据储存方法如下（假设有两块硬盘D1、D2）:

特点：有数据冗余，可靠性强，D1、D2被写入相同的数据，其中D2可以作为D1的完整备份。读取时，从两块硬盘上并行读取，写入慢，读取快。任何一块硬盘坏掉不会丢失数据，至少两块硬盘并且两块硬盘大小相等才能组成Raid1阵列。

容量：所有硬盘容量之和的一半（一半写数据，一半用来做备份）。

Raid4数据储存方法如下（假设有三块硬盘D1、D2、D3）:

特点：有数据冗余校验，可靠性强。其中任何一块硬盘坏掉都不会引起数据丢失，D1丢失时，D3根据校验和以及D2的数据进行逆运算，计算出D1的数据。但当写入大量数据时校验盘D3会是一个数据瓶颈，导致写入慢。只有当两块磁盘同时丢失时，数据才无法恢复。至少三块硬盘并且磁盘大小应该相等才能组成Raid4阵列（不常用）。

容量：所有硬盘容量之和减去其中一块硬盘的容量。

Raid5数据储存方法如下（假设有三块硬盘D1、D2、D3）:

特点：采用奇偶校验，可靠性强，磁盘校验和被散列到不同的磁盘里面，增加了读写速率。只有当两块磁盘同时丢失时，数据才无法恢复，至少三块硬盘并且硬盘大小应该相等才能组成Raid5阵列。

容量：所有硬盘容量之和减去其中一块硬盘的容量，被减去的容量被分配到三块硬盘的不同区域用来存放数据校验信息。

Raid10（Raid1+Raid0）是现在比较常用的一种磁盘阵列级别，它的容错好，读写数据效率较高，但经费相对也较高。

Raid10数据储存方法如下（假设有四块硬盘D1、D2、D3、D4）:

特点：备份和并发式存取数据，可靠性强。D1、D2组成一个阵列Raid1，其中D1是数据盘，D2是备份盘；D3、D4也组成一个Raid1，其中D3是数据盘,D4是备份盘；在这个基础上将D1、D2作为一个整体，将D3、D4也作为一个整体，这两个整体之间再组成一个Raid0阵列。这样不仅仅读取数据会非常快，并发写入的速度也会随着磁盘的增多而变快。至少四块硬盘并且每块硬盘大小应该相等才能组成Raid10阵列。

容量：所有硬盘容量之和的一半（一半写数据，一半用来备份数据）。

Raid01数据储存方法如下（假设有四块硬盘D1、D2、D3、D4）:

特点：D1、D2组成一个阵列Raid0，D3、D4也组成一个阵列Raid0，D1、D2和D3、D4再组成一个Raid1。D1和D2作为数据盘阵列，D3和D4作为数据备份阵列，这种方式并不常用，至少四块硬盘并且每块硬盘大小应该相等才能组成Raid01阵列。

容量：所有硬盘容量之和的一半。

这一部分通过Linux上的mdadm命令来实现Raid10磁盘阵列。

实验环境为一台安装了5块硬盘的计算机， *** 作系统是CentOS7，除系统所在硬盘(/dev/sda)外，其余四块20G的硬盘盘符分别为（/dev/sdb、/dev/sdc、/dev/sdd、/dev/sde）；

主要用到的命令：mdadm；

CentOS7中mdadm默认已安装，如果没有安装，可以使用yum在线安装，如下：

到这里，实验的准备工作完成。

新创建的磁盘阵列默认是不能开机自启动的，需要手动创建一个配置文件，让系统在启动的时候自动启动Raid(经过测试，CentOS7并不需要创建这个配置文件，如果重启后磁盘阵列没有随机启动，请使用下面的方法配置一次)：

可以在创建RAID的时候指定有几块冗余磁盘，当工作磁盘出现故障的时候，冗余磁盘自动启动，顶替出现故障的磁盘继续工作，请看下面的实例：

下面手动将一块磁盘标记为故障，看看冗余盘是否起作用：

假如/dev/sdc经过测试后发现没有问题，想要重新加入md0使用，可以在系统重启后，使用"mdadm /dev/md0 -a /dev/sdc"命令将它重新（添加）启用。

如果以后，想要加入一块新硬盘到这个raid10里作为备份盘，这块新硬盘需要和其他硬盘（或分区）保持相同的大小，然后使用下面的命令添加：

要想彻底清除RAID以及数据，请使用下面的方法：

---