awk排除某列输出

2016-08-02

awk工具在文本处理上非常强大，我们常用的用法是选择某列输出，如print $1,$3。不过在特殊的情况下，也会遇到只排除例个某列，其他列都正常输出。针对 awk排除某列，这里就做个小总结。比如我的文件如下： 1[root@361way tmp]# more disk_io 2xvda 1.49 2.37 11.71 10615426 52410436 3xvdb 3.50 6.60 80.08 29535297 358410976 4xvda 0.00 0.00 0.00 0 0 5xvdb 5.05 12.12 72.73 12 72 排除第一列（打印第2……

多行合并为一行

2016-06-24

| perl/php/python/gawk/sed

现网中经常遇到匹配到某一关键字下的所有行合并到同一行，再次匹配到相关关键字再和下面的合并，示例如下： 1# line1 2a 3b 4# line2 5c 6d 7e 8# line3 9f 想要变成： 1# line1 a b 2# line2 c d e 3# line3 f 即：把某个”# line”打头与下一个”#line”打头之间的行合成一行(这一行包括#line)，但两个#line之间的行数……

awk抓取IP地址和端口

2016-01-24

| perl/php/python/gawk/sed

最近某交换机相关日志的输出中，需要提取到所有的IP信息，便于网络相关工程师分析统计。这个都通过简单的awk命令就可以实现。awk对字符操作可以使用正则表达式，并记录下分组,在使用r{n,m}重复匹配的语法时，需要添加–re-interval参数。如下: 1awk --re-interval '{match($0,/([0-9]{1,3}\.){3}[0-9]{1,3}/,a); print a[0]}' info.log |grep -v '^$' 如果文件中……

python和shell读取文件某一行

2015-08-07

| perl/php/python/gawk/sed

python和shell（awk命令）可以实现直接读取文件的某一行，按行号进行读取。并可以精准的取得该行的某个字段，这个有点类似于x轴、y轴定位某个点的操作。一、awk取某行某列值 awk 可以设置条件来输出文件中m行到n行中每行的指定的k字段，使用格式如下： 1awk 'NR==m,NR==n {print $k}' path/filename m,n,k表示实在……

输出包含特定字符的列

2015-08-07

| perl/php/python/gawk/sed

公司的一个同事在写shell 的时候，提了这么一个需求，sar的输出中，将idle列输出，而且要求适用不同的平台。在linux下通过awk打印$NF列就是ilde列，假设在其他平台下，如freebsd下idle列是$(NF-1)列，hp-unix下是$1列（只是假设，请勿直接对号入……

awk实现求和、平均、最大值和最小值的计算操作

2013-07-20

| perl/php/python/gawk/sed

比如有一个数据文件，只有一列（在之前可以通过各种手段过滤出只有数字这一列），比如操作的响应时间 1# cat data 2490898 31189235 420212 51494270 6146515 729369 823563 9563027 1022976 11127809 1216813 13551646 1418858 1518977 1、求和 1cat data|awk '{sum+=$1} END {print "Sum = ", sum}' 2、求平均 1cat data|awk '{sum+=$1} END {print "Average = ", sum/NR}' 3、求最大值 1cat data|awk 'BEGIN {max = 0} {if ($1>max) max=$1 fi} END {print "Max=", max}' 4、求最小值（min的初始值设置一个超大数即可） 1awk 'BEGIN {min = 1999999}……

vim 查找时忽略大小写

2013-03-12

| perl/php/python/gawk/sed shell脚本学习

默认情况下 vim 的查找都是区分大小写的, 这种查找方式有利于准确快速的定位到目标, 但是有时候vim的使用者也不一定能够确认那个单词的大小写情况, 这种情况下就要用到大小写忽略了. 实现这个操作有两种方式. 方式1 指令设定: 1:set ic(ignorecase 的缩写) 忽略大小写 2:set noic(noignorecase 的缩写) 不忽略大小写输入了上述指令, 当每次的……

linux下删除空行的几种方法

2013-01-21

| Linux/unix/mac shell脚本学习

在查看linux下的配置文件时，为了便于一目了然的查看，经常会删除空行和#头的行。而linux在删除空行的方法很多，grep、sed、awk、tr等工具都能实现。现总结如下： 1、grep 1grep -v '^$' file 2、sed 1sed '/^$/d' file 或 sed -n '/./p' file 3、awk 1awk '/./ {print}' file 或 awk '{if($0!=" ") print}' 4、tr 1tr -s "n" 除此之外，vim也……