awk数组与语法[通俗易懂]

awk数组与语法[通俗易懂]1、awk数组1.1数组结构1.2数组分类索引数组:以数字为下标关联数组:以字符串为下标1.3awk关联数组现有如下文本,格式如下:即左边是随机字母,右边是随机数字,即将相同的字母后面的数字加在一起,按字母的顺序输出以$1为下标,创建数组a[$1]=a[$1]+$2或者(a[$1]+=$2)然后配合END和for循环输出结果:for(iina):…

大家好,又见面了,我是你们的朋友全栈君。

1、awk数组

1.1 数组结构

awk数组与语法[通俗易懂] awk数组与语法[通俗易懂]

1.2 数组分类

引数组:以数字为下标

关联数组:以字符串为下标

1.3 awk关联数组

现有如下文本,格式如下:即左边是随机字母,右边是随机数字, 即将相同的字母后面的数字加在一起,按字母的顺序输出

awk数组与语法[通俗易懂]

以$1为下标,创建数组a[$1]=a[$1]+$2 或者(a[$1]+=$2)然后配合END和for循环输出结果:

awk数组与语法[通俗易懂]

for(i in a ) :循环的顺序不是按照文本内容的顺序来处理的,排序可以在命令后用sort

1.4 awk索引数组

以数字为下标的数组seq生成1-10数字,,只显示奇数行

awk数组与语法[通俗易懂]

seq生成1-10的数字,要求不显示文件的后3行

awk数组与语法[通俗易懂]

改变i的范围

1.5 awk数组实战去重

a++ 和++a

awk数组与语法[通俗易懂]

对一下文本进行去重处理 针对第二列去重

awk数组与语法[通俗易懂]

解法一:

awk数组与语法[通俗易懂]

解析:
!a[$2]++是模式(条件),命令也可写成awk ‘!
a[$2]=a[$2]+1{print $0}’ 22.txt
a[$2]++ ,“++”在后,先取值后加一
!a[$2]=a[$2]+1:是先取a[$2]的值,比较“!a[$2]”是否符合条件(条件非0),后加1
注意:此方法去重后的结果显示的是文本开头开始的所有不重复的行

解法二:

awk数组与语法[通俗易懂]

解析:
++a[$2]==1是模式(条件),也可写成a[$2]=a[$2]+1==1即只有当条件(a[$2]+1的结果)为1的时候才打印出内容
++a[$2] ,“++”在前,先加一后取值
++a[$2]==1:是先加1,后取a[$2]的值,比较“++a[$2]”是否符合条件(值为1)
注意:此方法去重后的结果显示的是文本开头开始的所有不重复的行

解法三:

awk数组与语法[通俗易懂]

解析:
注意此方法去重后的结果显示的是文本结尾开始的所有不重复的行

1.6 awk处理多个文件(数组、NR、FNR)

awk数组与语法[通俗易懂]

解析:NR==FNR处理的是第一个文件,NR!=FNR处理的是第二个文件.
注意:当两个文件NR(行数)不同的时候,需要把行数多的放前边.
解决方法:把行数多的文件放前边,行数少的文件放后边.

把输出的结果放入一个新文件new.txt中:

awk数组与语法[通俗易懂]

1.7 awk分析日志文件,统计访问网站的个数

awk数组与语法[通俗易懂]

2、awk简单语法

2.1 函数sub gsub

awk数组与语法[通俗易懂]

sub只会替换行内匹配的第一次内容;相当于sed ‘s###’
gsub 会替换行内匹配的所有内容;相当于sed ‘s###g’

awk数组与语法[通俗易懂] awk数组与语法[通俗易懂]

案例

以’|’为分隔, 现要将第二个域字母前的数字去掉,其他地方都不变, 输出为:

方法一:

awk数组与语法[通俗易懂]

方法二:

awk数组与语法[通俗易懂]

2.2 if else

awk数组与语法[通俗易懂] awk数组与语法[通俗易懂]

2.3 next用法

awk数组与语法[通俗易懂]

解析:
{print $0″ NO YES”}:此动作是默认执行的,当前边的$0~/AA/匹配,就会执行{print $0″ YES”;next}
因为action中有next,所以会跳过后边的action。
如果符合$0~/AA/则打印YES ,遇到next后,后边的动作不执行;如果不符合$0~/AA/,会执行next后边的动作;
next前边的(模式匹配),后边的就不执行,前边的不执行(模式不匹配),后边的就执行。

2.4 printf不换行输出及next用法

printf :打印后不换行

如下文本,如果 Description:之后为空,将其后一行内容并入此行。

解法一:

awk数组与语法[通俗易懂]

解析:使用正则匹配,匹配到’/^Desc.*:$/,就使用printf打印(不换行),不匹配的打印出整行。

解法二(使用ifelse实现):

awk数组与语法[通俗易懂]

解法三(使用next实现):

awk数组与语法[通俗易懂]

注:可简写成awk ‘/Desc.*:$/{printf $0;next}1’
printf.txt ## 1是pattern(模式),默认action(动作)是{print $0}

awk数组与语法[通俗易懂]

2.5 去重后计数按要求重定向到指定文件

文本如下,要求计算出每项重复的个数,然后把重复次数大于2的放入gt2.txt文件中,把重复次数小于等于2的放入le2.txt文件中

awk数组与语法[通俗易懂]

解析:{print },或括号中打印后可直接重定向到一个新文件,文件名用双引号引起来。如: {print $1 >”xin.txt”}

3、awk总结

  • NR==FNR ##不能写成NR=FNR(=在awk中是赋值的意思)
  • NR!=FNR ##NR不等于FNR
  • {a=1;a[NR]} 这样会报错:同一条命令中变量和数组名不能重复 d)printf 输出的时候不换行
  • {print },或括号中打印后可直接重定向到一个新文件,文件名用双引号引起来。如: {print $1 >”xin.txt”}
  • 当模式(条件)是0的时候,后边的动作不执行,!0的时候后边动作才执行。

原文地址:https://mp.weixin.qq.com/s/2Ic4lCBTYjxMuC8lH5IdVg

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/161641.html原文链接:https://javaforall.net

(0)
上一篇 2022年7月19日 下午1:46
下一篇 2022年7月19日 下午2:16


相关推荐

  • python 日志模块–python logbook使用方法

    python 日志模块–python logbook使用方法本文介绍一下 pythonlogboo 日志模块的用法

    2026年3月17日
    2
  • pytest的assert_assert断言语句

    pytest的assert_assert断言语句前言断言是写自动化测试基本最重要的一步,一个用例没有断言,就失去了自动化测试的意义了。什么是断言呢?简单来讲就是实际结果和期望结果去对比,符合预期那就测试pass,不符合预期那就测试failed

    2022年7月28日
    23
  • 求三角形【内心,外心,重心,垂心】

    求三角形【内心,外心,重心,垂心】三角形的重心 外心 垂心 内心和旁心称之为三角形的五心 三角形五心定理是指三角形重心定理 外心定理 垂心定理 内心定理 旁心定理的总称 本文主要根据五心的性质求三角形的五心 设三角形为 ABC a BC b CA c AB 先准备一下需要的变量和函数 structPoint doublex y Point Point doublexx doubley

    2026年3月19日
    3
  • 通义千问1.5-1.8B-Chat-GPTQ-Int4在网络安全领域的应用:威胁情报分析

    通义千问1.5-1.8B-Chat-GPTQ-Int4在网络安全领域的应用:威胁情报分析

    2026年3月12日
    3
  • vim/ideavim命令[通俗易懂]

    vim/ideavim命令[通俗易懂]IdeaVim插件使用技巧在IDEAIntellij小技巧和插件一文中简单介绍了一下IdeaVim插件。在这里详细总结一下这个插件在日常编程中的一些常用小技巧。供有兴趣使用这个插件,但对Vim还不十分熟悉的朋友参考。当然基本的hjkl移动光标和几种常见模式等等基本概念就略过不提了。为了确保只包含常用操作,这里提到的技巧都没有从现成文档里抄,而是凭记忆列出(不常用自然就不记得了)。估计会有所遗漏,慢慢再补充。1.切换Vim模拟器状态这个插件允许设置一个快捷键一键开启或关闭,在切换模式时会同时自

    2026年4月20日
    5
  • 手机游戏开发综述[通俗易懂]

    手机游戏开发综述[通俗易懂]一、背景介绍  现在的移动电话是小型的计算机,它的处理能力与台式机的标准处理能力相比很有限,但是足够运行一个小型的游戏。  现在的手机的一个特性就是它们还是网络计算机,能够高速发送和接收数字数据。除了语音数据以外,它们还可以发送和接收其它类型的数据。所以类似《传奇》、《千年》这样的网络游戏也可以在手机上实现。当然就处理能力和性能而言,当前阶段的支持Java的手机很接近第二代控制台游戏机、80年

    2022年6月7日
    43

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号