Loading [MathJax]/jax/output/HTML-CSS/jax.js

《Linux命令行与shell脚本编程大全》第十一章 构建基本脚本

简介: 11.1使用多个命令 date;who//5.2.1(date;who),这个是进程列表,会生成一个子shell来执行 Shell脚本的关键在于输入多个命令并处理每个命令的结果,甚至需要将一个命令的结果传给另外一个命令。

11.1使用多个命令

$date;who   //  命令列表,加入分号就可以,这样会依次执行。参见5.2.1节

注意区分$(date;who),这个是进程列表,会生成一个子shell来执行

Shell脚本的关键在于输入多个命令并处理每个命令的结果,甚至需要将一个命令的结果传给另外一个命令。

Shell可以让你将多个命令串起来,一次性完成。

 

上面的date;who可以写入一个文件,这样就不用在命令行敲命令了,运行这个文本文件就好了。

 

11.2 创建shell脚本文件

第一行必须这样:指定要使用的shell

#!/bin/bash

 

1.一般情况#用来注释的,但是第一行的#除外

比如写一个test,内容如下:

#!/bin/bash

date

who

 

如果想直接运行,需要将路径添加到PATH环境变量中去。

也可以当前目录直接./test,这样可能会没有权限。

chmod u+x test   //  增加执行权限

接着就可以  ./test 运行了

 

11.3 显示消息

想在脚本上加提示信息,可以直接这样:

#!/bin/bash

echo  haha,I am xiaochongyong, data print:

date

echo  “Let’s see who’s logged:”

who

 

如果想要输出单引号,需要加双引号把整句话括起来,否则会不正常。比如:

 

 

还可以这样:

 

 

echo命令可以用单引号或双引号来划定文本字符串。如果在字符串中用到了它们,需要在文本中使用一种引号,而用另外一种来将字符串划定起来

 

把文本字符串和 命令输出显示在同一行中。用 –n 参数:

#!/bin/bash

echo  –n  “The time and date are: ”

date

 

11.4 使用变量

通常会需要在shell命令使用其他数据来处理信息,可以通过变量来实现。

变量允许你临时性的将信息存储在shell中,以便和脚本中的其他命令一起使用

11.4.1 环境变量

Shell维护着一组环境变量用来记录特定的系统信息。比如系统的名字,登录到系统的用户,UID等。

可以用set命令来显示一份完整的当前环境变量列表。

 

在脚本中可以在环境变量前加上美元符$来使用环境变量。

#!/bin/bash

# display Info

echo "User info for userid: $USER"

echo UID: $UID

echo HOME: $HOME

 

 

echo “The cost of the item is $15”

这样输出不了1的值,再显示5。应该在前面防止一个反斜杠

echo “The cost of the item is \$15”

 

\允许脚本将美元符解读为实际的美元符

 

11.4.2 用户变量

Shell脚本还允许在脚本中定义和使用自己的变量。

定义变量允许临时存储数据并在脚本中使用,这样看起来更像是一个程序了。

用户变量可以是任何字母数字或下划线组成的文本字符串,长度不超过20个。区分大小写

使用=给用户变量赋值,变量=和值之间不能有空格

比如:

var=10

Var=2

Var3=testing

Var4=”hahaha”

 

Shell脚本会自动决定变量值的数据类型,在脚本整个生命周期里变量会一直保持它们的值,直到结束时会被删除掉。

也是用美元符引用。

 

也可以用变量对变量进行赋值,比如:

 

#!/bin/bash

age=22

name="xiaochongyong"

echo "Hi, i am name,ageage"

echo "copy test2:"

age1=$age

name1=$name

echo "Hi, copy test i am name1,ageage1"

 

11.4.3 命令替换

Shell脚本最有用的特性之一就是可以从命令输出中提取信息,并将其赋给变量。这样就可以随意在脚本中使用了。

有两种方法可以将命令输出赋值给变量

(1)反引用字符(` `)。美式键盘上在波浪线~同一个键位

(2)$() 格式:

#!/bin/bash

testing=`date`

echo -n "date  is: $testing"

echo ""

testing2=$(date)

echo -n "date2 is: $testing2"

echo ""

 

下面这个就有意思了:

#!/bin/bash

# copy the /usr/bin directory listing to a log file

today=$(date +%y%m%d)

ls /usr/bin -al > log.$today

 

today是被赋予格式化之后的date命令的输出,这是提取日期信息来生成日志文件名常用的一种技术。  

+%y%m%d格式告诉date命令将日期显示为两位数的年月日的组合

ls /usr/bin -al > log.$today   这里就重定向到一个文件中了。

 注意:

命令替换会创建一个子shell来运行对应的命令。子shell所执行命令是无法使用脚本中所创建的变量的。

在命令行提示符下使用路径./也会创建出子shell。  比如:test3脚本中  ./test2 

要是运行命令的时候不加入路径,就不会创建子shell。

如果使用的是内建shell命令就不会涉及子shell。

 

11.5 重定向输入和输出

11.5.1输出重定向

将命令的内容重定向到文件

Command > outfile

比如:who > test6  不存在则创建,存在则覆盖

pwd >> test6  这样会追加

 

11.5.2 输入重定向

1.将文件的内容重定向到命令

小于号  <

wc命令可以对数据中的文本进行计数。

默认会输出文本的行数,文本的词数,文本的字节数

比如:

wc < test6

 

2.内联输入重定向:无需使用文件进行重定向,只需要在命令行中指定用户输入重定向的数据就可以了。

符号:  <<

还需要指定一个文本标记来划分输入数据的开始和结尾,任何字符串都可以作为文本标记,但在数据的开始和结尾文本标记必须一致。

 

比如这样,输入xcy表示结束。Wc命令对内联输入重定向提供的数据进行行、词、字节数的计数,直到输入了作为文本标记的那个字符串。

 

11.6 管道

可以将一个命令的输出作为另一个命令的输入。可以用重定向来实现,也可以用管道。

 

管道连接(piping):直接将命令输出重定向到另一个命令中。

格式:  command1 | command2

这两个命令不是依次执行的,而是同时运行的,在内部将它们连接起来。

可以在一条命令中使用多条管道,可以持续的将命令的输出通过管道传给其他命令来细化操作。

 

注意:管道与重定向的区别

(1) | 左边的命令应该有标准输出,右边应该接受标准输入

(2)重定向, > 右边只能是文件,  左边命令要有标准输出

  <  左边能接受标准输入,右边只能是文件(文件好像有点不合理)

(3)重定向是在一个进程内执行的,管道触发两个子进程执行|两边的程序

 

例子:

$cat test2 | grep –n ‘echo’   // 左边输出,右边接受输入,查找包含 grep的行

$grep –n ‘echo’ < test  // 效果更上面类似

 

下面是网上别人的: http://10744927.blog.51cto.com/10734927/1758474/

Linux Shell常用技巧(十) 管道组合

二十. 通过管道组合Shell命令获取系统运行数据:

    1.  输出当前系统中占用内存最多的5条命令:

    #1) 通过ps命令列出当前主机正在运行的所有进程。

    #2) 按照第五个字段基于数值的形式进行正常排序(由小到大)。

    #3) 仅显示最后5条输出。

    /> ps aux | sort -k 5n | tail -5

    stephen   1861  0.2  2.0  96972 21596  ?  S     Nov11   2:24 nautilus

    stephen   1892  0.0  0.4 102108  4508  ?  S<sl Nov11   0:00 /usr/bin/pulseaudio

    stephen   1874  0.0  0.9 107648 10124 ?  S     Nov11   0:00 gnome-volume

    stephen   1855  0.0  1.2 123776 13112 ?  Sl     Nov11   0:00 metacity

    stephen   1831  0.0  0.9 125432  9768  ?  Ssl   Nov11   0:05 /usr/libexec/gnome

   

    2.  找出cpu利用率高的20个进程:

    #1) 通过ps命令输出所有进程的数据,-o选项后面的字段列表列出了结果中需要包含的数据列。

    #2) 将ps输出的Title行去掉,grep -v PID表示不包含PID的行。

    #3) 基于第一个域字段排序,即pcpu。n表示以数值的形式排序。

    #4) 输出按cpu使用率排序后的最后20行,即占用率最高的20行。

    /> ps -e -o pcpu,pid,user,sgi_p,cmd | grep -v PID | sort -k 1n | tail -20

 

    3.  获取当前系统物理内存的总大小:

    #1) 以兆(MB)为单位输出系统当前的内存使用状况。

    #2) 通过grep定位到Mem行,该行是以操作系统为视角统计数据的。

    #3) 通过awk打印出该行的第二列,即total列。

    /> free -m | grep "Mem" | awk '{print $2, "MB"}'

    1007 MB

   

1.  获取当前或指定目录下子目录所占用的磁盘空间,并将结果按照从大到小的顺序输出:

    #1) 输出/usr的子目录所占用的磁盘空间。

    #2) 以数值的方式倒排后输出。

    /> du -s /usr/* | sort -nr

    1443980 /usr/share

    793260   /usr/lib

    217584   /usr/bin

    128624   /usr/include

    60748    /usr/libexec

    45148    /usr/src

    21096    /usr/sbin

    6896      /usr/local

    4           /usr/games

    4           /usr/etc

    0           /usr/tmp

   

    2.  批量修改文件名:

    #1) find命令找到文件名扩展名为.output的文件。

    #2) sed命令中的-e选项表示流编辑动作有多次,第一次是将找到的文件名中相对路径前缀部分去掉,如./aa改为aa。

    #    流编辑的第二部分,是将20110311替换为mv & 20110310,其中&表示s命令的被替换部分,这里即源文件名。

    #    \1表示被替换部分中#的.

    #3) 此时的输出应为

    #    mv 20110311.output 20110310.output

    #    mv 20110311abc.output 20110310abc.output

    #    最后将上面的输出作为命令交给bash命令去执行,从而将所有20110311*.output改为20110311*.output

    /> find ./ -name "*.output" -print  | sed -e 's/.\///g' -e 's/20110311./mv & 20110310\1/g' | bash

   

    3.  统计当前目录下文件和目录的数量:

    #1) ls -l命令列出文件和目录的详细信息。

    #2) ls -l输出的详细列表中的第一个域字段是文件或目录的权限属性部分,如果权限属性部分的第一个字符为d,

    #    该文件为目录,如果是-,该文件为普通文件。

    #3) 通过wc计算grep过滤后的行数。

    /> ls -l * | grep "^-" | wc -l

    /> ls -l * | grep "^d" | wc -l

   

    4.  杀掉指定终端的所有进程:

    #1) 通过ps命令输出终端为pts/1的所有进程。

    #2) 将ps的输出传给grep,grep将过滤掉ps输出的Title部分,-v PID表示不包含PID的行。

    #3) awk打印输出grep查找结果的第一个字段,即pid字段。

    #4) 上面的三个组合命令是在反引号内被执行的,并将执行的结果赋值给数组变量${K}。

    #5) kill方法将杀掉数组${K}包含的pid。

    /> kill -9 {K}=`ps -t pts/1 | grep -v PID | awk '{print1}'`   

 

    5.  将查找到的文件打包并copy到指定目录:

    #1) 通过find找到当前目录下(包含所有子目录)的所有*.txt文件。

    #2) tar命令将find找到的结果压缩成test.tar压缩包文件。

    #3) 如果&&左侧括号内的命令正常完成,则可以执行&&右侧的shell命令了。

    #4) 将生成后的test.tar文件copy到/home/.目录下。

    /> (find . -name "*.txt" | xargs tar -cvf test.tar) && cp -f test.tar /home/.

   

    #1) cpio从find的结果中读取文件名,将其打包压缩后发送到./dest/dir(目标目录)。

    #2) cpio的选项介绍:

    #    -d:创建需要的目录。

    #    -a:重置源文件的访问时间。

    #    -m:保护新文件的修改时间。

    #    -p:将cpio设置为copy pass-through模式。

    /> find . -name "*" | cpio -dampv ./dest/dir

11.7 执行数学运算

有两种途径:

11.7.1 expr 命令:允许在命令行上处理数学表达式

对于那些容易被shell错误解释的字符,在它们传入expr命令之前需要使用转义字符\将其标出来。

比如:

#!/bin/bash

# expr test:

var1=10

var2=20

var3=(exprvar2 / $var1)

#var4=(exprvar2 * $var1)   Error,

var4=(exprvar2 \* $var1)

echo The var3 result is $var3

echo The var4 result is $var4

有一个expr命令操作符表可以看一下。

11.7.2 使用方括号

比expr方便多了。还不同担心乘号或其它符号。

在shell脚本中进行算数运算会有一个主要的限制:只支持整数运算

比如:

#!/bin/bash

# expr test:

var1=10

var2=20

var3=[var2 / $var1]

var4=[var2 * $var1]

var5=[var2 + var2var1]

echo The var3 result is $var3

echo The var4 result is $var4

echo The var5 result is $var5

11.7.3 浮点解决方案

有几种解决方案,最常见的是用内建的bash计算机,叫做bc

1.bc的基本用法

bash计算机实际上是一种编程语言,它允许在命令行中输入浮点表达式,然后解释并计算表达式

直接输入bc,进入计算机:

 

 

Bash计算机设置好scale后就可以显示小数了。

还支持变量

 

2.在脚本中使用bc

可以用命令替换运行bc命令,并将输出赋值给一个变量

格式如下:

Variable=$(echo “options; expression” | bc)

比如:

#!/bin/bash

var=$(echo "scale=4; 13 / 10" | bc)

echo var is $var

var1=300

var2=45

var3=(echo"scale=4;var1 / $var2" | bc)

echo var3 is $var3

var4=(echo"scale=4;var3 + $var2 * 2" | bc)

echo var4 is $var4

 

上面的方法适用于较短的运算,涉及到很多数字时就会有点麻烦。

解决方案:bc命令能识别输入重定向,允许将一个文件重定向到bc命令来处理。最好的方案是使用内联输入重定向,它允许你直接在命令中重定向数据。

Varible=$(bc << EOF

Options

Statements

Expressions

EOF

)

 

比如:

#!/bin/bash

var1=10

var2=9

var3=8

var4=7

var5=$(bc << EOF

scale = 4

a1 = (var1var2)

a2 = (var3var4)

a2 + a1 * a1

a2

EOF

)

echo var4 is $var5

EOF标识了内联重定向数据的起止,记住,仍然需要命令替换符号将bc命令的输出赋给变量

将选项和表达式放在脚本的不同行可以让处理过程变得清晰。

还可以在bash计算机中赋值给变量,在bc计算机中创建的变量只在bc计算机中有效,不能再shell脚本中使用

 

11.8 退出脚本

Shell中运行的每个命令都使用退出吗告诉shell它已经运行完毕。

退出码是一个0 – 255的整数值

11.8.1 查看退出状态码

如何查看:echo &?

惯例是一个成功结束的命令的退出码是0,如果一个命令结束时有错误,退出状态就是正整数。

 

11.8.2 exit命令

默认情况下,shell脚本会以脚本中的最后一个命令的退出状态码退出。

也可以改变这种行为

这么写: exit 5

再在终端中查看一下:

 

补充:关于内联重定向

基本形式如下:

command  << delimiter

  document

delimiter

作用:将两个delimiter之间的内容(document)作为输入传递给command。

主要用途:用于脚本命令行交互

注意:结尾的delimiter要顶格写,前面不能有字符。

例子1:

#!/bin/bash

cat << EOF

hahaha1

hahaha2

hahaha3

EOF

echo exit code is $?

 

这个不大好理解

 

目录
打赏
0
0
0
0
4
分享
相关文章
|
7天前
|
在Linux、CentOS7中设置shell脚本开机自启动服务
以上就是在CentOS 7中设置shell脚本开机自启动服务的全部步骤。希望这个指南能帮助你更好地管理你的Linux系统。
62 25
|
4天前
|
shell_42:Linux参数移动
总的来说,参数移动是Linux shell脚本中的一个重要概念,掌握它可以帮助我们更好地处理和管理脚本中的参数。希望这个解释能帮助你理解和使用参数移动。
33 18
|
16天前
|
阿里云linux服务器使用脚本通过安全组屏蔽异常海外访问ip
公网网站可能会遭受黑客攻击导致访问异常,使用此脚本可以屏蔽掉异常IP 恢复访问。也可自行设置定时任务定期检测屏蔽。
116 28
如何在阿里云的linux上搭建Node.js编程环境?
本指南介绍如何在阿里云Linux服务器(Ubuntu/CentOS)上搭建Node.js环境,包含两种安装方式:包管理器快速安装和NVM多版本管理。同时覆盖全局npm工具配置、应用部署示例(如Express服务)、PM2持久化运行、阿里云安全组设置及外部访问验证等步骤,助你完成开发与生产环境的搭建。
|
3月前
|
【linux】Shell脚本中basename和dirname的详细用法教程
本文详细介绍了Linux Shell脚本中 `basename`和 `dirname`命令的用法,包括去除路径信息、去除后缀、批量处理文件名和路径等。同时,通过文件备份和日志文件分离的实践应用,展示了这两个命令在实际脚本中的应用场景。希望本文能帮助您更好地理解和应用 `basename`和 `dirname`命令,提高Shell脚本编写的效率和灵活性。
156 32
linux应急响应检查脚本
通过这个脚本,可以快速收集系统的关键信息,有助于在发生问题时进行及时的应急响应和分析。
141 34
|
3月前
|
Linux编程: 在业务线程中注册和处理Linux信号
本文详细介绍了如何在Linux中通过在业务线程中注册和处理信号。我们讨论了信号的基本概念,并通过完整的代码示例展示了在业务线程中注册和处理信号的方法。通过正确地使用信号处理机制,可以提高程序的健壮性和响应能力。希望本文能帮助您更好地理解和应用Linux信号处理,提高开发效率和代码质量。
70 17
|
3月前
|
Linux编程: 在业务线程中注册和处理Linux信号
通过本文,您可以了解如何在业务线程中注册和处理Linux信号。正确处理信号可以提高程序的健壮性和稳定性。希望这些内容能帮助您更好地理解和应用Linux信号处理机制。
69 26
[oeasy]python064_命令行工作流的总结_vim_shell_python
本文总结了命令行工作流中的关键工具和操作,包括vim、shell和Python。主要内容如下: 1. **上次回顾**:完成了输入输出的代码编写,并再次练习了vim的使用。 2. **shell基础**:介绍了shell环境及其基本命令,如`pwd`、`cd`、`ll -l`等。 3. **Python游乐场**:通过`python3`命令进入Python交互环境,可以进行简单计算和函数调用,常用函数有`help`、`ord`、`chr`等。 4. **vim编辑器**:详细讲解了vim的三种模式(正常模式、插入模式、底行命令模式)及其切换方法,以及常用的底行命令如`:w`、`:q`、`
103 15
【手把手教你Linux环境下快速搭建Kafka集群】内含脚本分发教程,实现一键部署多个Kafka节点
本文介绍了Kafka集群的搭建过程,涵盖从虚拟机安装到集群测试的详细步骤。首先规划了集群架构,包括三台Kafka Broker节点,并说明了分布式环境下的服务进程配置。接着,通过VMware导入模板机并克隆出三台虚拟机(kafka-broker1、kafka-broker2、kafka-broker3),分别设置IP地址和主机名。随后,依次安装JDK、ZooKeeper和Kafka,并配置相应的环境变量与启动脚本,确保各组件能正常运行。最后,通过编写启停脚本简化集群的操作流程,并对集群进行测试,验证其功能完整性。整个过程强调了自动化脚本的应用,提高了部署效率。
【手把手教你Linux环境下快速搭建Kafka集群】内含脚本分发教程,实现一键部署多个Kafka节点
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等