位置: 编程技术 - 正文

linux文本分析awk基础命令介绍(8)(linux文本操作命令)

编辑:rootadmin

推荐整理分享linux文本分析awk基础命令介绍(8)(linux文本操作命令),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:linux 文本分割,linux 文本操作,linux 文本,linux文本操作命令,linux 文本,linux文本处理常用命令,linux文本处理实验,linux文本分析工具操作过程,内容如对您有帮助,希望把文章链接给更多的朋友!

awk是一种模式扫描和处理语言,在对数据进行分析处理时,是十分强大的工具。

awk [options] 'pattern {action}' file...

awk的工作过程是这样的:按行读取输入(标准输入或文件),对于符合模式pattern的行,执行action。当pattern省略时表示匹配任何字符串;当action省略时表示执行'{print}';它们不可以同时省略。每一行输入,对awk来说都是一条记录(record),awk使用$0来引用当前记录:

例子中将命令head -1 /etc/passwd作为awk的输入,awk省略了pattern,action为print $0,意为打印当前记录。对于每条记录,awk使用分隔符将其分割成列,第一列用$1表示,第二列用$2表示...最后一列用$NF表示

选项-F表示指定分隔符如输出文件/etc/passwd第一行第一列(用户名)和最后一列(登录shell):

当没有指定分隔符时,使用一到多个blank(空白字符,由空格键或TAB键产生)作为分隔符。输出的分隔符默认为空格。如输出命令ls -l *的结果中,文件大小和文件名:

还可以对任意列进行过滤:

其中$5>表示第五列的值大于;&&表示逻辑与;$NF ~ /txt$/中,~表示匹配,符号//内部是正则表达式。这里省略了action,整条awk语句表示打印文件大小大于字节并且文件名以txt结尾的行。

awk用NR表示行号

例子中||表示逻辑或,语句表示:输出文件/etc/passwd中以root开头的行或者第二行。

在一些情况下,使用awk过滤甚至比使用grep更灵活如获得ifconfig的输出中网卡名及其对应的mtu值

以上所说的NR、NF等都是awk的内建变量,下面列出部分常用内置变量

awk中还可以使用自定义变量,如将网卡名赋值给变量a,然后输出网卡名及其对应的RX bytes的值(注意不同模式匹配及其action的写法):

awk中有两个特殊的pattern:BEGIN和END;它们不会对输入文本进行匹配,BEGIN对应的action部分组合成一个代码块,在任何输入开始之前执行;END对应的action部分组合成一个代码块,在所有输入处理完成之后执行。

awk还支持数组,数组的索引都被视为字符串(即关联数组),可以使用for循环遍历数组元素如输出文件/etc/passwd中各种登录shell及其总数量

linux文本分析awk基础命令介绍(8)(linux文本操作命令)

当然也有if分支语句

pattern之间可以用逗号分隔,表示从匹配第一个模式开始直到匹配第二个模式

还支持三目操作符pattern1 &#; pattern2 : pattern3,表示判断pattern1是否匹配,true则匹配pattern2,false则匹配pattern3,pattern也可以是类似C语言的表达式。如判断文件/etc/passwd中UID大于的登录shell是否为/bin/bash,是则输出整行,否则输出UID为0的行:

选项-f file表示从file中读取awk指令

选项-F指定列分隔符

选项-v var=val设定变量

print等函数还支持使用重定向符>和>>将输出保存至文件

内建函数length()获得字符串长度

split()将字符串按分隔符分隔,并保存至数组

getline从输入(可以是管道、另一个文件或当前文件的下一行)中获得记录,赋值给变量或重置某些环境变量

next作用和getline类似,也是读取下一行并覆盖$0,区别是next执行后,其后的命令不再执行,而是读取下一行从头再执行。

sub(regex,substr,string)替换字符串string(省略时为$0)中首个出现匹配正则regex的子串substr

gsub(regex,substr,string)与sub()类似,但不止替换第一个,而是全局替换

substr(str,n,m)切割字符串str,从第n个字符开始,切割m个。如果m省略,则到结尾

tolower(str)和toupper(str)表示大小写转换

system(cmd)执行shell命令cmd,返回执行结果,执行成功为0,失败为非0

match(str,regex)返回字符串str中匹配正则regex的位置

awk作为一个编程语言可以处理各种各样的问题,甚至于编写应用软件,但它更常用的地方是命令行下的文本分析,生成报表等,这些场景下awk工作的很好。工作中如经常有文本分析的需求,那么掌握这个命令的用法将为你节省大量的时间。

标签: linux文本操作命令

本文链接地址:https://www.jiuchutong.com/biancheng/371513.html 转载请保留说明!

上一篇:Bash中数组的操作教程(bash 数值比较)

下一篇:linux文本过滤grep基础命令介绍(5)(linux怎样过滤一个关键字)

  • 工程承包公司账务处理
  • 研发支出属于什么科目借贷方向
  • 年底计提是什么意思
  • 哪些进项税额不能加计抵减
  • 贴现收到的钱计入什么会计科目
  • 公司垫付员工工资怎么做账
  • 企业收到退回商品的会计分录
  • 品种法完工产品成本的单位成本怎么算
  • 物业费纳税
  • 公司变更监事需要换营业执照吗?
  • 无形资产摊销方法应当反映其经济利益
  • 合伙企业营业执照多少钱
  • 增值税计入应付账款
  • 进口货物的企业有哪些
  • 预收账款贷方负数表示什么
  • 微软推出windows1
  • 材料没入库的会计分录
  • php数组函数题目
  • 交暖气费可以开单位发票吗
  • 推荐一款免费的vba编辑器
  • 工程项目科目如何设置
  • 固定资产非正常损失进项税
  • php单例模式应用场景
  • yii框架运行原理
  • 自产产品用于应税项目为什么不考虑偷税
  • thinkphp6验证
  • python random random
  • 资本化支出影响营业利润吗
  • 什么人适合单干
  • 小规模定额征收和查账征收哪个更好一些
  • 商品流通企业税费按征收对象可分为
  • 运费发票没到可以先计提吗
  • 可抵扣的进项税额要减去进项转出吗
  • 建筑业一般纳税人增值税税负
  • 预付账款的账务处理视频教程
  • 折旧完的固定资产出售
  • 学校收到政府补助的会计分录
  • 进料料件复出可以给第三方吗
  • 公司注销后原有未使用的包装还可以用吗怎么办
  • 赠送商品需要开发票吗
  • 新租赁准则入账
  • 筹建期费用需要结转吗
  • 扣除土地价款
  • 其他应收款可以挂公司吗
  • 房地产开发企业销售自行开发的房地产项目
  • 工业企业营业税率
  • 苹果mac无法连接网络
  • mac怎么卸载第三方软件
  • 虚拟机安装苹果电脑
  • egui.exe是什么进程
  • Win8系统网络SSID怎么设置?Win8设置网络SSID的方法
  • Win10怎么打开屏幕键盘
  • win8系统怎么重新安装系统
  • 基于嵌入式linux的课程设计
  • nginx sbin目录
  • win10桌面图标无法正常显示
  • win8笔记本无法更新正在撤销更改
  • linux一键安装软件
  • win7系统安装软件权限设置
  • windows更新某些设置由你的组织来管理是什么意思
  • 注册win7账号
  • unity ar sdk
  • opengl环境光
  • javascript标题
  • express.json()
  • 打地鼠android
  • unicode 字符百科
  • android自动开关机失效
  • 大家看的是什么
  • data命令
  • jQuery实现ToolTip元素定位显示功能示例
  • AngularJS + Node.js + MongoDB开发的基于高德地图位置的通讯录
  • unity3d操作
  • Python 常用库
  • python的opencv
  • jquery选项卡
  • JavaScript For Beginners(转载)
  • 熟练使用jquery
  • 湖北省国家税务总局
  • 港股印花税什么时候下调
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设