在linux操作系统中，经常会将2个有关联文本文件进行合并处理。

分别从不同文件获取需要的列，然后，整体输出到一起。

awk进行多文件处理时候，常常会遇到2个方面问题，第一个是怎么样合并多个文件为一个文件。
第二个问题就是怎么样将多行合并为一行显示

本文分享二种处理办法，以实现awk对多个文件的操作，供大家学习参考。

实例文本：
 

合并后的结果：
 

1，awk多文件操作方法一：
实现思路：
通过外部命令合并文件，然后通过排序，然后通过awk进行合并操作。
首先：
 

现在需要把：第一列相同的处理合并到一行，需要例用“next”语句。

有关awk合并行的操作，可以参考文章：awk 多行合并【next 使用介绍】（常见应用4）

继续：
 

需要把几行合并，经常用到方法是：NR%num 然后将行值保存下来，next该行。在输出时候打印出来。

二，awk多文件操作方法二
实现思路：
不借助第3放工具打开，直接通过awk 打开多个文件。
然后，通过：FILENAME获得当前处理文件名。NR总记录 FNR当前文件记录,以及ARGC传入参数总数，ARGV是数组，各个参数值。

实例：
 

代码：
 

代码说明：
这里用到2维数组，aData[文件名,关联列对应值] ,这种方法可以将多个文件内容。
放入一个统一二维数组。然后循环数组，通过if((i,j} in array) 查找对应列值，在其它文件中是否存在。

本节内容：
vmstat命令的用法示例

在linux操作系统中，vmstat命令是最常见的Linux/Unix监控工具，可以展现给定时间间隔的服务器的状态值,包括服务器的CPU使用率，内存使用，虚拟内存交换情况,IO读写情况。

此命令相比top，可以看到整个机器的CPU,内存,IO的使用情况，而不是单单看到各个进程的CPU使用率和内存使用率(使用场景不一样)。

一般vmstat工具的使用是通过两个数字参数来完成的：
第一个参数是采样的时间间隔数，单位是秒；
第二个参数是采样的次数，例如:
 

2表示每个两秒采集一次服务器状态，1表示只采集一次。

实际上，在应用过程中，会在一段时间内一直监控，不想监控直接结束vmstat即可，例如:
 

这表示vmstat每2秒采集数据，一直采集，直到我结束程序，这里采集了5次数据我就结束了程序。

下面介绍下vmstat命令的参数含义。

r 表示运行队列(就是说多少个进程真的分配到CPU)，我测试的服务器目前CPU比较空闲，没什么程序在跑，当这个值超过了CPU数目，就会出现CPU瓶颈了。这个也和top的负载有关系，一般负载超过了3就比较高，超过了5就高，超过了10就不正常了，服务器的状态很危险。top的负载类似每秒的运行队列。如果运行队列过大，表示你的CPU很繁忙，一般会造成CPU使用率很高。

b 表示阻塞的进程,这个不多说，进程阻塞，大家懂的。

swpd 虚拟内存已使用的大小，如果大于0，表示你的机器物理内存不足了，如果不是程序内存泄露的原因，那么你该升级内存了或者把耗内存的任务迁移到其他机器。

free   空闲的物理内存的大小，我的机器内存总共8G，剩余3415M。

buff   Linux/Unix系统是用来存储，目录里面有什么内容，权限等的缓存，我本机大概占用300多M

cache cache直接用来记忆我们打开的文件,给文件做缓冲，我本机大概占用300多M(这里是Linux/Unix的聪明之处，把空闲的物理内存的一部分拿来做文件和目录的缓存，是为了提高 程序执行的性能，当程序使用内存时，buffer/cached会很快地被使用。)

si  每秒从磁盘读入虚拟内存的大小，如果这个值大于0，表示物理内存不够用或者内存泄露了，要查找耗内存进程解决掉。我的机器内存充裕，一切正常。

so  每秒虚拟内存写入磁盘的大小，如果这个值大于0，同上。

bi  块设备每秒接收的块数量，这里的块设备是指系统上所有的磁盘和其他块设备，默认块大小是1024byte，我本机上没什么IO操作，所以一直是0，但是我曾在处理拷贝大量数据(2-3T)的机器上看过可以达到140000/s，磁盘写入速度差不多140M每秒

bo 块设备每秒发送的块数量，例如我们读取文件，bo就要大于0。bi和bo一般都要接近0，不然就是IO过于频繁，需要调整。

in 每秒CPU的中断次数，包括时间中断

cs 每秒上下文切换次数，例如我们调用系统函数，就要进行上下文切换，线程的切换，也要进程上下文切换，这个值要越小越好，太大了，要考虑调低线程或者进程的数目,例如在apache和nginx这种web服务器中，我们一般做性能测试时会进行几千并发甚至几万并发的测试，选择web服务器的进程可以由进程或者线程的峰值一直下调，压测，直到cs到一个比较小的值，这个进程和线程数就是比较合适的值了。系统调用也是，每次调用系统函数，我们的代码就会进入内核空间，导致上下文切换，这个是很耗资源，也要尽量避免频繁调用系统函数。上下文切换次数过多表示你的CPU大部分浪费在上下文切换，导致CPU干正经事的时间少了，CPU没有充分利用，是不可取的。

us 用户CPU时间，我曾经在一个做加密解密很频繁的服务器上，可以看到us接近100,r运行队列达到80(机器在做压力测试，性能表现不佳)。

sy 系统CPU时间，如果太高，表示系统调用时间长，例如是IO操作频繁。

id  空闲 CPU时间，一般来说，id + us + sy = 100,一般我认为id是空闲CPU使用率，us是用户CPU使用率，sy是系统CPU使用率。

wt 等待IO CPU时间。

本节内容：
Linux常用命令之netstat命令

在linux系统中，Netstat 命令用于显示各种网络相关信息，如网络连接，路由表，接口状态 (Interface Statistics)，masquerade 连接，多播成员 (Multicast Memberships) 等。

一，输出信息含义
执行netstat后，其输出结果为：
 

从整体上看，netstat的输出结果可以分为两个部分：

一个是Active Internet connections，称为有源TCP连接，其中"Recv-Q"和"Send-Q"指%0A的是接收队列和发送队列。这些数字一般都应该是0。如果不是则表示软件包正在队列中堆积。这种情况只能在非常少的情况见到。

另一个是Active UNIX domain sockets，称为有源Unix域套接口(和网络套接字一样，但是只能用于本机通信，性能可以提高一倍)。
Proto显示连接使用的协议,RefCnt表示连接到本套接口上的进程号,Types显示套接口的类型,State显示套接口当前的状态,Path表示连接到套接口的其它进程使用的路径名。

常见参数
 

提示：LISTEN和LISTENING的状态只有用-a或者-l才能看到

linux系统中vmstat命令的实例，分享如下。
 
1. 列出所有端口 (包括监听和未监听的)
列出所有端口 netstat -a
 

列出所有 tcp 端口 netstat -at
 

列出所有 udp 端口 netstat -au
 

2. 列出所有处于监听状态的 Sockets
只显示监听端口 netstat -l
 

只列出所有监听 tcp 端口 netstat -lt
 

只列出所有监听 udp 端口 netstat -lu
 

只列出所有监听 UNIX 端口 netstat -lx
 

3. 显示每个协议的统计信息
显示所有端口的统计信息 netstat -s
 

显示 TCP 或 UDP 端口的统计信息 netstat -st 或 -su
 

4. 在 netstat 输出中显示 PID 和进程名称 netstat -p
netstat -p 可以与其它开关一起使用，即可添加 “PID/进程名称” 到 netstat 输出中，这样 debugging时可以很方便的发现特定端口运行的程序。
 

5. 在 netstat 输出中不显示主机，端口和用户名 (host, port or user)
当不想让主机，端口和用户名显示，使用 netstat -n。将会使用数字代替那些名称。
同样可以加速输出，因为不用进行比对查询。
 

如果只是不想让这三个名称中的一个被显示，可以使用命令：
 

6. 持续输出 netstat 信息
netstat 将每隔一秒输出网络信息。
 

7. 显示系统不支持的地址族 (Address Families)
netstat --verbose
在输出的末尾，会有如下的信息
 

8. 显示核心路由信息 netstat -r
 

注意： 使用 netstat -rn 显示数字格式，不查询主机名称。

9. 找出程序运行的端口
并不是所有的进程都能找到，没有权限的会不显示，使用 root 权限查看所有的信息。
 

  找出运行在指定端口的进程
 

10. 显示网络接口列表
 

显示详细信息，像是 ifconfig 使用 netstat -ie:
 

11. IP和TCP分析
查看连接某服务端口最多的的IP地址
 

TCP各种状态列表
 

先把状态全都取出来,然后使用uniq -c统计，之后再进行排序。
 

最后的命令:
 

分析access.log获得访问前10位的ip地址：
 

有关linux netstat命令的用法，就介绍这些了，希望对大家有所帮助。