文本分析和处理 awk|学习笔记

开发者学堂课程【Linux 文本管理入门:文本分析和处理 awk】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.alilinux必学的60个命令yun.com/learning/course/790

文本分析和处理awk

内容简介:

一:工具简介

二:工具使用

三:常用场景

一:工具简介

●简介

AMK是一种解析式编程语言,非常强大,是专门设计来进行文本处理的,名称是其三位创建者( Alfred Aho, Peter Weinberger. and Brian Kernighan)姓的首字母。

GNU/Linux分linux命令发的版本是由自由软件基金会(FSF)维护的,常常被叫做Gawk,Awk和Sed-样都是行编辑器,两者的工作流程很像,但Awk有很多更加强大的地方。

l 与sed相比的优点:

◆方便的数值处理与计算

◆变量和流程控制

◆访问linux必学的60个命令行之中域

◆灵活的打印

◆内置数值和市非数

◆类C语法

l 脚本结构

下图指出了一个awk程序脚本的结构:

以BEGIN开始,以END结束,这两perl个话句都是可选的。

每一个语句都是一个pattern-action对,和sed相似。当开发者选项开启好还是关闭好输入符合模式时,对相应的action 才会执行

如果省略Patterperloven,则动作的每一行都执行默认的动作是打印当前行。

BEGIN--读第一行之前执行

END--处理完linux必学的60个命令最后一行后执行

文本分析和处理 awk|学习笔记

二:工具使用

l 运行方式

第一种:awk'script' input files

此时的脚本内容通过命令行参数传进去:

Awk’{print}’text1

第二种:awk -f script_ file input_ files

将脚本文件传进去awk1即为脚本)

Awk-f awk1 text1

l 模式

1.正则表达式/ pattert/:

将匹配text1开发者选项在哪,text2,text3

Is awk "/test[123]/{}prilinux虚拟机nt}’

2.!排除表达式:

不匹配linux是什么操作系统text1,text开发者模式是干什么的2,text3

Is I awk ‘!/test[ 123]/{print}’

3.关系表达式:

超出一百字节的文件名

Isperl安装教程- HIlawk

$5>100{print $9}’

4. 匹配表达式:

$9==”text1”比较是否相等

$9-/”text”/是否和正对表达式匹配

下例匹配所有以向text开头的文件:/^text

Is -I |awk ‘$9~/^text*/{print}’

5.多个表达式:

多个表达式之间,可使用”||””&&"逻辑运算符

如找出大于100字节小于200字节,且以text为开头的文件,可以这样做:

Is -l|awk’

$5>100 && $5 <200 && $9~text*/{pr开发者选项怎么关闭int $9}’

6.变量

◆可以定义和perla使用变量

例如:

BEGIN {count开发者模式打开好还是关闭好=0}

{count++}

END {perlitaprint count}

字符串变量初始化为null(即:\0)

数值变量初始化为0

变量不用声明

awk中定义变量并不需要声明,aw开发者模式打开有什么影响k会根据上下文环linux创建文件境,自动判断类型。

7. 预定义变量

◆预定义变量

前面提到过两个概念:行和域。这是粗略的类比。实际上在AWk中有更精确的perla定义

1.Record记录,perlita默认为一行

2.RS( Record Seperl怎么读par开发者模式打开有什么影响at)记linux命令录分割符,默认为”\n”

3开发者模式打开有什么影响.NR( Number of Record)指第几个记录perlita

4.Fleid:域

5 .FS(Field Separator)域分割符,默认是空白字符(个或多个空格或ab)

6.NF( Nperl怎么读umber of Fields)当前说操的linux城总数

7.可通过一F或者linux在BEGIN action牛指定M例如Fs

8.$0整个记录,$1表示第一个记录,$2表示第二个,类推

8.变量perla是什么牌子操作一字符串类型

◆字符串串接

添加xt后缀

(last $".txt"}

字符串赋值

使用=直接赋值即可,如上例所示

(print $1,$2}

◆内置字符串开发者模式打开好还是关闭好函数

内置了一系列字符串处理函数,如substr(str.sn)从stlinux重启命令r的第s位开始至多截取。

9perlita.简单输出

打印整个记录:

(printy/(print $O}

使用变量:

打印第一个域,第二个域

(print $1,$2)

使用字符串:

print "There are ",NF,fields")打印域总数,第一个域linux是什么操作系统,和最后一个域

(print NF, $1,SNF)

添加行号(RS为n'时)

print NR,SO)开发者模式打开好还是关闭好

10.输出printf

◆printf更为精细的输出控制像C一样,Awk允许使用,printfi进行格式化输出

printf(format,val1,val2,...)

示例:

Is-I lawk'{

string ="hello world"

printf("%10d %sIn",NR,str开发者模式有什么危害ing)

}’

三:使用场景

1. 统计各国人口密度

文本分析和处理 awk|学习笔记

开发者学堂课程【Linux 文本管理入门:文本分析和处理 awk】学习笔记,与课程紧密联系,让用户快linux命令速学习知识。

课程地址开发者模式打开有什么影响https://developer.aliyun.com/learning/course/790

文本分析和处理awk

内容简介:

一:工具简介

二:工具使用

三:常用场景

一:工具简介

●简介

AMK是一种解析式编程语言,非常linux强大,是专门设计来进行文本处理的,名称是其三位创建者( Alfred Aho, Peter Weinberger. and Brian Ke开发者模式打开好还是关闭好rnighan)姓的首字母。

GNU/Linux分发的版本是由自由软件基金会(FSF)维护的,常常被叫做Gawk,Awk和Sed-样都是行编辑器,两者的工作流程很像,但Awk有很多更加强大的地开发者模式有什么危害方。

l 与sed相比perl的优点:

◆方便的数值处理与计算

◆变量和流程控制

◆访问行linux创建文件之中域

◆灵活的打印

◆内置数值和市非数

◆类C语法

l 脚本结构

下图指出了一个awk程序脚本的结构:

以BEGIN开始,以END结束,这两个话句都是可选的。

每一个语句都是一个pattern-action对,和sed相似。当输入符合模式时,对相应linux重启命令的actiolinux虚拟机n 才会执行。

如果省略Pattern,则动作的每一行都执行默认的动作是打印当前行。

BEGIN--读第一行之前执行

END--处理完最后一行后执行linux是什么操作系统

文本分析和处理 awk|学习笔记

二:工具使用

l 运行方式

第一种:awk'script' input files

此时的脚本内容通过命令行参数传进去:

Awk’{print}’text1

第二种:awkperl脚本 -f script_ file input_ filesperla

将脚本文件传进perlman去awk1即为脚本)

Awk-f awk1 text1

l 模式

1.正则表达式/开发者选项打开有害吗 pattert/:

将匹配text1,te开发者选项在哪xt2,text3

Is awk "/test[123]/{}prin开发者模式怎么关闭t}’

2.!排除表达式:

不匹配text1,text2,text3

Is I awk ‘!/test[ 123]/{prperla咖啡int}’

3.关系表达式:

超出一linux系统百字节的文件名

Is- HIlawk

$5>100{print $9}’

4. 匹配表达式:

$9linux是什么操作系统==”text1”比较perlman是否相等

$9-/”text”/是否和正对表达式匹配

下例匹配所有以向text开头的linux创建文件文件:/^text

Is -I开发者选项打开有害吗 |awk ‘$9~/^text*/{print}’

5.多个表达式:

多个表达式之间,可使用”||””开发者模式怎么关闭&&"逻辑运算符

如找出大于100字节小于2perl是什么意思00字节,且以text为开头的文件,可以这样做:

Is -l|awk’

$5>100 && $5 <200 &&linux常用命令; $9~text*/{print $9}’

6.变量

◆可以定义和使用变量

例如:

BEGIN {count=0}

{count++}

END {print count}

字符串变量初始化为null(即perla:\0)

数值变量初始化为0

变量不用声明

awk中perl脚本定义变量并perl怎么读不需要声明,awk会根据上下文环境,自动判断类型。

7. 预定义变量

◆预定义变量

前面提到过两个概念:行和域。这是粗略的类比。实际上在AWk中有更精确的定义

1.Recordperlman记录,默认为一行

2.RS( Record Separat)记录分割符,默认为”\n”

3.NR( Number of Record)指第几个记开发者选项打开有害吗

4.Fleid:域

5 .FS(Field Separator)域分割符,默认是空白字符(个或多个空格或ab)

6.NF( Nuperla咖啡mbelinux重启命令r of Fi开发者选项开启好还是关闭好elds)当前说操的城总数

7.可通过一F或perlove者在Blinux重启命令EGIN action开发者模式打开有什么影响牛指定M例如Fs

8.$0整个记录,$1表示第一个记录,$2表示第二个,类推

8.变量操作一字符串类linux

◆字符串串接

添加xt后缀

(last $".txt"}

字符串赋值

使用=直接赋值即可,如上例所示

(prperl安装教程int $1,$2}

◆内置字符串函开发者模式怎么关闭

内置了一系列字符串处理函linux必学的60个命令数,如substr(stlinuxr.sn)从str的第s位开始至多截取。

9.简单输出

打印整个记录:

(printy/(print $O}

使用变量:

打印第一个域,第二个域

(print $1,$2)

使用字符串:

print "There are ",NF,fielperl脚本ds")开发者选项在哪打印域总数,第一个域,和最后一个域

(print NF, $1,linux必学的60个命令SNF)

添加行号(RS为nlinux是什么操作系统'时)

print NRlinux重启命令,SO)

10.输出printf

◆printperlf更为精细的输出控制像C一样,Awk允许使用,printperlmanfi进行格式化输出

printf(format,val1,val2,...)

示例:

Isperla咖啡-I lawk'{

string ="hello world"

printf("%10d %sIn",NR,string)

}’

三:使用场景

1. 统计各国人口密度

文本分析和处理 awk|学习笔记