目录

Shell

Shell脚本的执行

Shell脚本编写规范

Shell 中的变量

变量的算术运算

双小括号 (())  数值运算命令的用法

let 运算命令的用法

expr 命令的用法

br 命令的用法

$[] 符号的运算示例

Shell脚本的条件测试

几种条件测试语句

文件测试操作符

字符串测试操作符

整数二元比较操作符

逻辑操作符

测试表达式 test 、[] 、[[]] 、 (()) 的区别

if 条件判断语句

case 条件判断语句

for循环语句

while循环语句

Break、Continue、exit 循环控制语句

Shell脚本执行scrapy爬虫和python脚本

Shell
Shell是一个命令解释器，它的作用是解释执行用户输入的命令及程序等。 用户每输入一条命令，Shell就执行一条。这种从键盘输入命令，就可以立即得到回应的对话方式，称为交互的方式。

当命令或程序语句不在命令行下执行，而是通过一个程序文件来执行时，该程序文件就被称为Shell脚本。 在Shell脚本里内置了很多命令、语句及循环控制，然后将这些命令一次性执行完毕，这种通过文件执行脚本的方式称为非交互的方式。 Shell脚本语言很适合用于处理纯文本型的数据，而Linux系统中几乎所有的配置文件、日志文件，以及绝大对数的启动文件都是纯文本类型的文件。
Shell 脚本的类型
Shell脚本语言是弱类型语言（无须定义变量的类型即可使用），在Unix/Linux中主要有两大类shell: 
一类是 Bourne  shell ,另一类是 C shell

Bourne shell 包括 Bourne shell (sh)、Korn shell(ksh)、Bourne Again Shell 三种类型。 
C shell包括csh、tcsh两种类型
查看系统默认的shell： echo  $SHELL
查看系统支持的shell： cat  /etc/shells

 

Shell脚本的执行
Shell脚本的执行通常可以采用以下几种方式。

1、bash script-name 或 sh script-name     这是当脚本文件本身没有执行权限时常使用的方法

2、path/script-name 或./script-name    在当前路径下执行脚本，需要将脚本文件的权限改为可执行。然后使用脚本的绝对路径或相对路径就可以直接执行脚本了。

3、source script-name 或 .  script-name 这种方法通常是使用source或 “.”(点号）读入或加载指定的Shell脚本文件，然后依次执行指定的Shell脚本中的语句。这些语句将在当前父 shell 脚本进程中执行（其他几种模式都会启用新的进程执行该脚本进程）。

Shell脚本编写规范
Shell脚本的开发规范及习惯非常重要，虽然这些规范不是必须要遵守的，但有了好的规范和习惯，可以大大提升开发效率，并能在后期降低对脚本的维护成本。

1、一个规范的Shell脚本在第一行会指出由哪个程序（解释器）来执行脚本中的内容，这一行内容在Linux bash的编程一般为：#！/bin/bash  或 #!  /bin/sh     bash 与 sh 的区别 , sh 为 bash的软连接，大多数情况下，脚本使用“#！/bin/bash”和“#！/bin/sh”是没有区别的，但更规范的写法是在脚本的开头使用    #！/bin/bash 

2、在shell脚本中，跟在 # 后面的内容表示注释，用来对脚本进行注释说明，注释部分不会被当做程序来执行，仅仅是给开发者和使用者看的，系统解释器是看不到的，更不会执行。注释可以自成一行，也可以跟在脚本命令的后面与命令在同一行。 注释尽量不要使用中文，在脚本中最好也不要有中文。

3、Shell脚本的开头会加版本、版权等信息

# Date：16:29 2018-10-20 
# Author: Create by xiaoxie
# Description: This script function is …… 
# Version： 1.1 

4、在shell脚本中尽量不用中文注释，尽量用英文注释，防止本机或切换系统环境后中文乱码的困扰。

5、Shell脚本的命名应以.sh为扩展名 例如：1.sh

6、成对的符号应尽量一次性写出来，然后退格在符号内增加内容，以防止遗漏。这些成对的符号包括： {}、[]、‘’、“”  等

7、中括号[]两端至少要有1个空格，因此，键入中括号时即留出空格[  ]，然后在退格键入中间内容，并确保两端都至少由一个空格。

8、对于流程控制语句，应一次性将格式写完，再添加内容。 如：一次性完成for循环语句的格式

for
do
     内容
done

9、通过缩进让代码更易读，如：

if 条件内容     
       then         
            内容 
fi 

10、对于常规变量的字符串定义变量值应加双引号，并且等号前后不能有空格，需要强引用的，则用单引号（‘’），如果是命令的引用，则用反引号（``）。

 

11、脚本中的单引号、双引号及反引号必须为英文状态下的符号。

Shell 中的变量
简单地说，变量就是用一个固定的字符串（也可能是字符、数字等的组合）代替更多、更复杂的内容，该内容里可能还会包含变量、路径、字符串等其他内容。 变量是暂时存储数据的地方及数据标记，所存储的数据存在于内存空间中，通过正确地调用内存中变量的名字就可以读取出与变量对应的数据。

变量的赋值方法为： 先写变量名称，紧接着是 "=" ，最后是值。中间无任何空格。 通过echo命令加上  $变量名，即可输出变量的值。 双引号，以防止出错变量的值一般要加上。

定义变量时变量名建议用大写，如  A=xie     B=99

read  -p  “提示信息”   变量名      #交互式赋值方法

查看变量内容 echo $A  或  echo ${A}

 

赋值时使用引号的作用

• 双引号：允许通过$符号引用其他变量值
• 单引号：禁止引用其他变量值，$视为普通字符
• 反撇号：命令替换，提取命令执行后的输出结果 全局变量的定义方法 export 变量名

 

位置参数

位置参数是一种在调用 Shell 程序的命令行中按照各自的位置决定的变量，是在程序名之后输入的参数。 位置参数之间用空格分隔，Shell取第一个位置参数替换程序文件中的 $1，第二个替换 $2 , 依次类推。$0 是一个特殊变量，它的内容是当前这个shell程序的文件名，所以 $0 不是一个位置参数。

假如我现在有一个 1.sh脚本文件，内容如下

#! /bin/bash
echo $1
echo $(($2+$3))

当我执行时，我在文件名后加3个参数

 

预定义变量

预定义变量和环境变量相类似，也是在Shell一开始就定义的变量，不同的是，用户只能根据shell的定义来使用这些变量，所有预定义变量都是由符号“$”和另一个符号组成。 常见的Shell预定义变量有以下几种。

$# ：位置参数的数量
$* ：所有位置参数的内容
$? ：命令执行后返回的状态，0表示没有错误，非0表示有错误
$$ ：当前进程的进程号
$! ：后台运行的最后一个进程号
$0 ：当前执行的进程名
假如我现在有一个 1.sh脚本文件，内容如下

#! /bin/bash
 
echo $1
echo ${2}+${3}
 
echo $#             #打印出位置参数的数量
echo $*             #打印出位置参数的内容
echo $?             #打印出命令执行后返回的状态
echo $$             #打印出当前进程的进程号
echo $0             #打印出当前进程的进程名

当我执行时，我在文件名后加3个参数

 参考文章：Linux中环境变量的设置

变量的算术运算

Shell中常见的算术运算符

Shell 中常见的算术运算命令 

 双小括号 (())  数值运算命令的用法

双小括号 (()) 的作用是进行数值运算与数值比较，它的效率很高，用法灵活，是Linux下常用的运算操作符。其操作方法如下：

 

 

let 运算命令的用法

let运算命令的语法格式为： let 赋值表达式  

let 赋值表达式的功能等同于“((赋值表达式))” 范例：  给变量 i 加8

expr 命令的用法

1、expr 用于运算 
   语法：expr 表达式 
   范例：expr 2 + 2 ; expr 2 – 2 ; expr 2  \*  2 ;  expr 2  /  2    
   注意：运算符号和数字之间要有空格！！

 

 

2、expr配合变量计算

expr在Shell中可配合变量进行计算，但需要用反引号将计算表达式括起来。

 3、利用 expr 计算字符串的长度

 

br 命令的用法

bc 是UNIX/Linux下的计算器，除了作为计算器来使用，还可以作为命令行计算工具使用

交互模式 在shell命令行直接输入 bc 及能进入bc语言的交互模式

 

bc也可以进行非交互式的运算，方法是与 echo 一起使用，所以我们就可以写在脚本里面

$[] 符号的运算示例 

 

Shell脚本的条件测试

通常，在shell的各种条件结构和流程控制结构中都要进行各种测试，然后根据测试结果执行不同的操作，有时候也会与 if 等条件语句相结合，来完成测试判断，以减少程序运行错误。

几种条件测试语句

 文件测试操作符

注：（()）不能用于文件测试，文件测试一般常用的是 []

 字符串测试操作符

注： == 和 !=  两端要有空格  ，（()）不能用于字符测试

 整数二元比较操作符

"="和"!="也可以在[]中作比较使用，但在[]中使用包含"<"和">"的符号时，需要用反斜线转义，有时不转义虽然语法不会报错，但是结果可能不对。
也可以在[[]]中使用包含“-gt”和“-lt”的符号，但是不建议使用
比较符号两端也要有空格，[] （()）  [[]]  两端都要有空格

 逻辑操作符

 

测试表达式 test 、[] 、[[]] 、 (()) 的区别

if 条件判断语句

#####单条件判断##############
if  条件判断
  then 
      命令
else
      命令
fi
 
#或
 
if  条件判断;then 
     命令
else
     命令
fi

 

 

###双条件判断#####
if 条件判断
  then
      命令
elif 条件判断
  then 
      命令
else
   命令
fi
 
##或
if 条件判断;then
    命令
elif 条件判断;then 
    命令
else
    命令
fi

 

if语句对于字符串的匹配 

 

case 条件判断语句

case条件语句相当于多分支的if/elif/ellse条件语句，但是它比这些条件语句看起来更规范更工整，常被应用于实现系统服务启动脚本等企业应用场景中。

case  变量  in
        one)
            命令
;;
        two)
             命令
;;
         *) 
             命令
esac

 

 for循环语句

for  条件
do
   命令
done
 
##或
 
for  条件;do
   命令
done

 

 

while循环语句

while  条件
do
   命令
done

Break、Continue、exit 循环控制语句

break 、continue在条件语句及循环语句（for、while、if等）中用于控制程序走向；而exit则用于终止所有语句并退出当前脚本。

 

 

 

Shell脚本执行scrapy爬虫和python脚本

#! /bin/bash
cd /opt/project/
scrapy crawl xx
python3 test.py

(36条消息) Linux中编写Shell脚本_谢公子的博客-CSDN博客_linux shell脚本编写

Linux shell脚本编写

描述

shell脚本是一些linux命令的集合，因为在Linux的shell中运行的，所以称为shell脚本；
shell脚本由linux命令、bash shell命令、程序结构控制语句和注释等内容组成；
shell脚本的方便之处在于：可以将所有的操作记录于文件，然后直接一步操作调用完成；

编写规范

• 编辑器的使用
  在linux系统中，shell脚本通常使用内置的vim编辑器编写；
  也可以在其他的支持shell语言的编辑器中编写后导入Linux系统；

• 脚本开头（shebang/hashbang）
  在计算领域中，Shebang（也称为 Hashbang）是一个由井号和叹号构成的字符序列#!，其出现在文本文件的第一行的前两个字符。
  在 Shebang 之后，可以有一个或数个空白字符，后接解释器的绝对路径，用于指明执行这个脚本文件的解释器；

  #! /bin/bash
  do smthing...
  

• 脚本注释
  在shell脚本中，跟在#号后面的内容表示注释，用来对脚本进行注释说明，注释部分不会被执行；
  注释可自成一行，也可以直接跟在脚本命令后面；
  开发脚本时，尽量养成书写注释的习惯，方便别人也方便自己，有利于团队的协作。

• 编写示例

  [root@OpenWrtEXT:my_script]#cat core_auto_start.sh
  #!/bin/sh
  
  python -m rpd.tps --port 37 &     # 注释：启动TPS服务
  logfilename=master_log_$(date +%Y%m%d%H%M%S)  # 注释：设置log文件名变量
  python -m rpd.rcp.simulator.rcp_master_sim >logfilename 2>&1 &   # 注释：启动服务，并将log信息写入log文件
  
  [root@OpenWrtEXT:my_script]#
  

• 脚本运行

  • 通过解释器+脚本方式运行

  [root@OpenWrtEXT:my_script]#cat mytest.sh 
  #!/bin/sh
  echo "this is a test shell!!!!"
  logfile_name=master_log_$(date +%Y%m%d%H%M%S)  # create variable of log filename
  echo $logfile_name
  [root@OpenWrtEXT:my_script]#ll | grep my
  \-rw-r--r--    1 root     root           142 Jul 28 11:00 mytest.sh
  [root@OpenWrtEXT:my_script]#/bin/sh mytest.sh 
  this is a test shell!!!!
  master_log_20210728110110
  [root@OpenWrtEXT:my_script]#
  

  • 给脚本增加执行权限直接运行

  [root@OpenWrtEXT:my_script]#ll | grep my
  \-rw-r--r--    1 root     root           142 Jul 28 11:00 mytest.sh
  [root@OpenWrtEXT:my_script]#./mytest.sh    # 未加执行权限时，无法直接运行
  \-ash: ./mytest.sh: Permission denied
  [root@OpenWrtEXT:my_script]#chmod +x mytest.sh
  [root@OpenWrtEXT:my_script]#ll | grep my
  \-rwxr-xr-x    1 root     root           142 Jul 28 11:00 mytest.sh
  [root@OpenWrtEXT:my_script]#./mytest.sh   # 增加执行权限后，可以直接运行
  this is a test shell!!!!
  master_log_20210728110315
  [root@OpenWrtEXT:my_script]#
  

【2020全新shell脚本从入门到精通实战教程_哔哩哔哩_bilibili 自学笔记】

一：概念简括

shell脚本就是将一个任务的所有命令按照执行的先后顺序，自上而下写入到一个文本文件中，然后给予执行权限。

二：编写脚本

【例：使用shell脚本下载Nginx】

（1）保证虚拟机可以连得上网

（2）在opt文件下创建一个新的文件

mkdir /opt/shell
cd /opt/shell
mkdir shell_03

（3）进入目录

cd shell_03

（4）创建一个脚本文件（虽然linux没有后缀名概念，但还是建议.sh结尾）

vim nginx_install.sh

（5）编写脚本内容

yum -y install wget gcc  pcre-devel  zlib-devel 
wget http://nginx.org/download/nginx-1.20.1.tar.gz
tar xf nginx-1.20.1.tar.gz
cd nginx-1.20.1
./configure --prefix=/usr/local/nginx
make
make install

（6）给予权限 

chmod 700 nginx_install.sh

（7）执行脚本

./nginx_install.sh

（8）检查/usr/local目录中查看有没有nginx文件

cd /usr/local

ls

（9）启动nginx

./nginx/sbin/nginx 

（10）打开浏览器访问192.168.10.50
           访问失败，因为防火墙没有设置，要设置防火墙

firewall-cmd --permanent --add-service=http

firewall-cmd --reload

（11）再次访问

---

【补充内容】

1.chmod 777 nginx_install.sh

chmod命令是 linux 上用于改变权限的命令；

Linux 系统为每种权限（r、w 和 x）分配了对应的数字：

权限	数字
r(读)	4
w（写）	2
x（执行）	1

"7"即代表4+2+1，拥有读写执行权限

2.查看当前所在目录:pwd