位置: 编程技术 - 正文

Linux下的AWK入门教程(awtk linux)

编辑:rootadmin

推荐整理分享Linux下的AWK入门教程(awtk linux),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:linux中的awk命令详解,linux中的awk,linux的awk用法,linux的awk命令大全,linux的awk命令大全,linux中的awk命令详解,linux awk-f,linux的awk用法,内容如对您有帮助,希望把文章链接给更多的朋友!

简介awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大。简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。

awk有3个不同版本: awk、nawk和gawk,未作特别说明,一般指gawk,gawk 是 AWK 的 GNU 版本。

awk其名称得自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母。实际上 AWK 的确拥有自己的语言: AWK 程序设计语言 , 三位创建者已将它正式定义为“样式扫描和处理语言”。它允许您创建简短的程序,这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表,还有无数其他的功能。

使用方法awk '{pattern + action}' {filenames}尽管操作可能会很复杂,但语法总是这样,其中 pattern 表示 AWK 在数据中查找的内容,而 action 是在找到匹配内容时所执行的一系列命令。花括号({})不需要在程序中始终出现,但它们用于根据特定的模式对一系列指令进行分组。 pattern就是要表示的正则表达式,用斜杠括起来。

awk语言的最基本功能是在文件或者字符串中基于指定规则浏览和抽取信息,awk抽取信息后,才能进行其他文本操作。完整的awk脚本通常用来格式化文本文件中的信息。

通常,awk是以文件的一行为处理单位的。awk每接收文件的一行,然后执行相应的命令,来处理文本。

调用awk有三种方式调用awk

1.命令行方式awk [-F field-separator] 'commands' input-file(s)其中,commands 是真正awk命令,[-F域分隔符]是可选的。 input-file(s) 是待处理的文件。在awk中,文件的每一行中,由域分隔符分开的每一项称为一个域。通常,在不指名-F域分隔符的情况下,默认的域分隔符是空格。

2.shell脚本方式将所有的awk命令插入一个文件,并使awk程序可执行,然后awk命令解释器作为脚本的首行,一遍通过键入脚本名称来调用。相当于shell脚本首行的:#!/bin/sh可以换成:#!/bin/awk

3.将所有的awk命令插入一个单独文件,然后调用:awk -f awk-script-file input-file(s)其中,-f选项加载awk-script-file中的awk脚本,input-file(s)跟上面的是一样的。 本章重点介绍命令行方式。

入门实例假设last -n 5的输出如下

复制代码代码如下:[root@www ~]# last -n 5 <==仅取出前五行root pts/1 ..1. Tue Feb : still logged inroot pts/1 ..1. Tue Feb : - : (:)root pts/1 ..1. Mon Feb 9 : - : (:)dmtsai pts/1 ..1. Mon Feb 9 : - : (:)root tty1 Fri Sep 5 : - : (:)如果只是显示最近登录的5个帐号</p><p>#last -n 5 | awk '{print $1}'rootrootrootdmtsairootawk工作流程是这样的:读入有'n'换行符分割的一条记录,然后将记录按指定的域分隔符划分域,填充域,$0则表示所有域,$1表示第一个域,$n表示第n个域。默认域分隔符是"空白键" 或 "[tab]键",所以$1表示登录用户,$3表示登录用户ip,以此类推。

如果只是显示/etc/passwd的账户

复制代码代码如下:#cat /etc/passwd |awk -F ':' '{print $1}' rootdaemonbinsys这种是awk+action的示例,每行都会执行action{print $1}。

-F指定域分隔符为':'。

如果只是显示/etc/passwd的账户和账户对应的shell,而账户与shell之间以tab键分割

复制代码代码如下:#cat /etc/passwd |awk -F ':' '{print $1"t"$7}'root /bin/bashdaemon /bin/shbin /bin/shsys /bin/sh

如果只是显示/etc/passwd的账户和账户对应的shell,而账户与shell之间以逗号分割,而且在所有行添加列名name,shell,在最后一行添加"blue,/bin/nosh"。

复制代码代码如下:cat /etc/passwd |awk -F ':' 'BEGIN {print "name,shell"} {print $1","$7} END {print "blue,/bin/nosh"}'name,shellroot,/bin/bashdaemon,/bin/shbin,/bin/shsys,/bin/sh....blue,/bin/noshawk工作流程是这样的:先执行BEGING,然后读取文件,读入有/n换行符分割的一条记录,然后将记录按指定的域分隔符划分域,填充域,$0则表示所有域,$1表示第一个域,$n表示第n个域,随后开始执行模式所对应的动作action。接着开始读入第二条记录······直到所有的记录都读完,最后执行END操作。

Linux下的AWK入门教程(awtk linux)

搜索/etc/passwd有root关键字的所有行

复制代码代码如下:#awk -F: '/root/' /etc/passwdroot:x:0:0:root:/root:/bin/bash这种是pattern的使用示例,匹配了pattern(这里是root)的行才会执行action(没有指定action,默认输出每行的内容)。

搜索支持正则,例如找root开头的: awk -F: '/^root/' /etc/passwd

搜索/etc/passwd有root关键字的所有行,并显示对应的shell

复制代码代码如下:# awk -F: '/root/{print $7}' /etc/passwd /bin/bash这里指定了action{print $7}

awk内置变量awk有许多内置变量用来设置环境信息,这些变量可以被改变,下面给出了最常用的一些变量。

ARGC 命令行参数个数ARGV 命令行参数排列ENVIRON 支持队列中系统环境变量的使用FILENAME awk浏览的文件名FNR 浏览文件的记录数FS 设置输入域分隔符,等价于命令行 -F选项NF 浏览记录的域的个数NR 已读的记录数OFS 输出域分隔符ORS 输出记录分隔符RS 控制记录分隔符 此外,$0变量是指整条记录。$1表示当前行的第一个域,$2表示当前行的第二个域,......以此类推。

统计/etc/passwd:文件名,每行的行号,每行的列数,对应的完整行内容:

复制代码代码如下:#awk -F ':' '{print "filename:" FILENAME ",linenumber:" NR ",columns:" NF ",linecontent:"$0}' /etc/passwdfilename:/etc/passwd,linenumber:1,columns:7,linecontent:root:x:0:0:root:/root:/bin/bashfilename:/etc/passwd,linenumber:2,columns:7,linecontent:daemon:x:1:1:daemon:/usr/sbin:/bin/shfilename:/etc/passwd,linenumber:3,columns:7,linecontent:bin:x:2:2:bin:/bin:/bin/shfilename:/etc/passwd,linenumber:4,columns:7,linecontent:sys:x:3:3:sys:/dev:/bin/sh

使用printf替代print,可以让代码更加简洁,易读

复制代码代码如下: awk -F ':' '{printf("filename:%s,linenumber:%s,columns:%s,linecontent:%sn",FILENAME,NR,NF,$0)}' /etc/passwd

print和printfawk中同时提供了print和printf两种打印输出的函数。

其中print函数的参数可以是变量、数值或者字符串。字符串必须用双引号引用,参数用逗号分隔。如果没有逗号,参数就串联在一起而无法区分。这里,逗号的作用与输出文件的分隔符的作用是一样的,只是后者是空格而已。

printf函数,其用法和c语言中printf基本相似,可以格式化字符串,输出复杂时,printf更加好用,代码更易懂。

awk 日常常用学习笔记:

# 取出两个文件中相同的部分 复制代码代码如下:awk 'NR==FNR{a[$0]=0;next}{if($0 in a){print $0}}' file1 file2

# 取出两个文件中不同的部分 复制代码代码如下:awk 'NR==FNR{a[$0]=0;next}{if(!($0 in a)){print $0}}' file1 file2

# 计算nginx日志访问排名前位的ip 复制代码代码如下:awk '{a[$1]++}END{for(i in a) print a[i],i}' access.log | sort -rn | head -

#统计各个科目的数量 复制代码代码如下:# cat test.txtxqq 语文 数学xq 英语 语文x 数学 美术awk '{for(i=2;i<=NF;i++) a[$i]++}END{for(i in a) print i,a[i]}' test.txt

# 获取系统ip

复制代码代码如下:ifconfig eth0 | awk 'NR==2{print $2}' | cut -d: -f2

Linux系统下jailkit的安装与使用示例 jailkit是一款能够在一个chrootjail中快速创建受限用户帐户的工具集。它包含了一个安全日志守护进程,shells可以限制用户,开启和设置chrootjail守护进程

Linux系统下的用户审计方法 创建审计日志目录复制代码代码如下:mkdir-p/var/log/user_audit创建用户审计日志文件;复制代码代码如下:touch/var/log/user_audit/user_audit.log将文件赋予低权限用

Linux Bonding配置详解 一、什么是bonding多块网卡绑在一起,作为一个网卡用,实现负载均衡和提高带宽,linux双网卡绑定一个IP地址,实质工作就是使用两块网卡虚拟为一块,

标签: awtk linux

本文链接地址:https://www.jiuchutong.com/biancheng/364757.html 转载请保留说明!

上一篇:linux系统怎么增加swap分区空间小?(linux新增lv)

下一篇:Linux系统下jailkit的安装与使用示例(linux kinit)

  • 个人所得税退税操作流程
  • 私营独资企业交个税还是企税
  • 幼儿园会计需要做什么工作
  • 买车交的保险
  • 企业自产的产品转为自用
  • 公允价值变动损益属于什么科目
  • 返岗补贴怎么办理
  • 增值税专票销售额含税吗
  • 股东参与经营可以分红吗
  • 资产总计是期初余额吗
  • 应交税费减免税款
  • 企业临时账户是什么意思
  • 2021年洗车是不是免增值税
  • 以前年度不合规发票怎么处理
  • 企业所得税计提金额怎么算
  • 专票进项税可以抵扣几个月以前的
  • 印花税少于1元怎么处理
  • 投资收益税前扣除标准
  • 小微企业声明函怎么开
  • 旅客运输抵税
  • 销售货物收入与租金收入的纳税区别
  • 残保金征收单位
  • 一刀999是什么游戏
  • 公司开业前启动大会
  • php提高性能
  • php如何通过链接获取源码
  • 收到退款的会计分录
  • 来料加工报废产品合同
  • 应交税费进项税额在借方说明什么
  • 500万元固定资产管理办法
  • 应付账款与其他应付款科目调整
  • 新建vue项目
  • 爱德华多·阿涅利
  • 制造业企业预提短期借款利息
  • 结存材料实际成本分录
  • jquery还用吗2020
  • 深度学习论文精读[6]:UNet++
  • js 跳转网页
  • 车船税每年都要多少钱
  • 投资入股的会计处理
  • 水利建设基金计算公式
  • 社保费和公积金一定要计提吗
  • 发票认证系统叫什么名字
  • mysql数据类型怎么判断
  • php命令行模式
  • 公司有收入可不交社保吗
  • 异地预缴附加税会计分录
  • SQL2005中char nchar varchar nvarchar数据类型的区别和使用环境讲解
  • 合伙企业怎么建账
  • 银行存款支付业务招待费
  • 进料加工转内销会计处理
  • 加计减免其他收入怎么填
  • 投资性房地产与持有待售资产的区别
  • 收到土地使用权计入什么科目
  • 公司费用分摊给各部门
  • 小规模纳税人增值税计算公式
  • mysql有外键数据输入
  • sql you
  • mysql连接数 是针对db还是服务器
  • 写出linux安装的详细步骤
  • centos安装ntfs 3g
  • Linux系统防火墙的命令
  • 原版windowsxp安装
  • win10系统应用和浏览器控制出现感叹号
  • Win10装不上是什么原因
  • win7系统损坏无法开机怎么重装
  • win8的开始
  • script_tool_for_windows.bat Windows 环境下的 hosts 一键部署脚本
  • 手机弹窗游戏
  • unity3d官方教程
  • js判断输入用户名是否正确
  • unity延迟调用函数
  • unity全屏
  • 详解JavaScript对W3C DOM模版的支持情况
  • linux一些常用操作命令 (不定时更新)
  • 云税票管家是什么软件
  • 山西税务12366
  • 土地二次买卖
  • 电子税务局怎么找回用户名
  • 建筑行业增值税税率2021
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设