实战:shell脚本练习
高效编写Bash脚本的技巧
总结了10个实用技巧,帮助提高脚本的效率和可靠性,具体包括:
-
多写注释:在脚本中添加注释,以帮助理解脚本的不同部分。
-
当运行失败时使脚本退出:使用
set -o errexit
或set -e
,在命令失败时退出脚本。 -
当Bash用未声明变量时使脚本退出:使用
set -o nounset
或set -u
,避免使用未声明的变量。 -
使用双引号来引用变量:防止由于空格或通配符导致的不必要匹配。
-
在脚本中使用函数:通过函数使代码模块化,提高可读性和可重用性。
-
字符串比较时用
=
而不是==
:在Bash中,=
和==
是等价的,但推荐使用=
。 -
用
$(command)
而不是反引号command
进行命令代换:推荐使用$(command)
,因为它更清晰。 -
用
readonly
声明静态变量:声明变量为只读,防止其值被修改。 -
环境变量用大写字母命名,自定义变量用小写:遵循命名约定,避免变量名冲突。
-
总是对长脚本进行调试:在脚本执行前进行调试,以便于修正错误。
相关例子
-
多写注释
-
举例:在脚本中添加注释,例如:
# This script updates the system packages update_system() {sudo apt-get updatesudo apt-get upgrade -y }
-
好处:增加代码的可读性,便于维护和理解。
-
问题:没有注释的脚本难以理解,特别是在团队协作中,其他成员可能难以快速上手。
-
-
当运行失败时使脚本退出
-
举例:使用
set -e
来确保脚本在命令失败时立即退出:-
set -e ./some_command || true # 这个命令失败不会退出脚本
-
-
好处:防止错误的累积和传播,提高脚本的健壮性。
-
问题:不立即退出可能导致后续命令基于错误的前提执行,造成更严重的错误。
-
-
当Bash用未声明变量时使脚本退出
-
举例:使用
set -u
来避免使用未声明的变量: -
set -u echo "$undeclared_var" # 这将导致脚本退出
好处:避免使用未初始化的变量,减少潜在的bug。
-
问题:使用未声明的变量可能导致不可预测的行为或错误的输出。
-
-
使用双引号来引用变量
-
举例:使用双引号来防止变量展开或通配符匹配:
-
names="TecMint FOSSMint" echo "$names" # 正确:"TecMint FOSSMint" echo $names # 错误:可能分割成两个单词
好处:确保变量按照预期的方式被引用,防止意外的单词分割。
-
问题:不使用双引号可能导致变量值中的空格或特殊字符被错误解释。
-
-
在脚本中使用函数
-
举例:将重复的代码块封装成函数:
check_root() {if [ "$(id -u)" != "0" ]; thenecho "This script must be run as root" >&2exit 1fi }
好处:提高代码的模块化和重用性,简化脚本结构。
-
问题:不使用函数可能导致代码重复,难以维护和扩展。
-
-
字符串比较时用
=
而不是==
-
举例:使用单等号进行字符串比较:
if [ "$value1" = "$value2" ]; thenecho "Values are equal" fi
好处:简化语法,避免混淆。
-
问题:使用
==
在某些shell中可能不被识别,导致语法错误。 -
哈哈,虽然简单场景用 [ ] 和 = 更保证可移植性和安全性。 但是这个我还是更喜欢用 [[ ]] 和 == ;
-
-
用
$(command)
而不是反引号进行命令代换-
举例:使用
$()
进行命令替换:user=$(whoami) # 正确 user=`whoami` # 错误:不建议使用
好处:提高代码的可读性和一致性。
-
问题:反引号在复杂表达式中可能导致错误,且不如
$()
易读。
-
-
用
readonly
声明静态变量-
举例:使用
readonly
来防止变量被修改:readonly config_path="/etc/config"
好处:确保配置值在脚本中保持不变,防止意外的修改。
-
问题:不声明为只读可能导致变量在脚本中被错误地修改。
-
-
环境变量用大写字母命名,自定义变量用小写
-
举例:遵循命名约定:
export PATH="/usr/bin:/bin" local script_path="$(dirname "$0")"
好处:避免与系统环境变量冲突,提高变量名的可读性。
-
问题:不遵循命名约定可能导致变量名冲突或混淆。
-
-
总是对长脚本进行调试
-
举例:使用
bash -n script.sh
来检查脚本中的语法错误:bash -n my_script.sh
好处:提前发现潜在的错误,避免在生产环境中出现问题。
-
问题:不进行调试可能导致脚本在实际运行时出现未预料的错误,影响系统的稳定性。
-
遵循这些技巧可以编写出更加健壮、可维护和易于理解的Bash脚本。
用nice指定shell脚本在运行过程中的优先级
在Linux系统中,脚本、程序、命令等可能同一时刻需要运行,而CPU在一个时刻只能运行其中的一个,这个时候就牵扯到先后的问题,换言之,也就是优先级。
系统中,进程的优先级一般包括实时优先级和静态优先级,在任何时刻,实时进程的优先级高于普通进程,实时进程的优先级范围0~99,普通进程的优先级范围100~139,因此,数值越小,优先级越高。
1 查看Linux中进程的优先级
[root@achao ~]# ps -l
F S UID PID PPID C PRI NI ADDR SZ WCHAN TTY TIME CMD
4 S 0 2935 2928 0 80 0 - 29180 do_wai pts/0 00:00:00 bash
0 R 0 3071 2935 0 80 0 - 38328 - pts/0 00:00:00 ps
ps命令能够显示当前系统中正在运行的进程,并且能够显示进程的详细信息,其中,PRI和NI是和进程优先级相关的字段。PRI的默认取值范围是0~99,进程的优先级涉及到进程调度相关的知识,此处不做展开。本篇旨在使用。
2 使用nice指定优先级
NICE值是进程优先级的修正值,NICE和优先级的关系如下:
PRI值=PRI值(旧值)+NICE值
进程最终的优先级是PRI和NICE值的和,NICE值可以是正数,也可以是负数,当NICE值为正时,会使得进程优先级降低,反之,可以提高进程优先级。
NICE取值范围-20~19。
设置进程NICE值使用nice命令,介绍如下
[root@achao ~]# nice --help
Usage: nice [OPTION] [COMMAND [ARG]...]
Run COMMAND with an adjusted niceness, which affects process scheduling.
With no COMMAND, print the current niceness. Niceness values range from
-20 (most favorable to the process) to 19 (least favorable to the process).
Mandatory arguments to long options are mandatory for short options too.
-n, --adjustment=N add integer N to the niceness (default 10)
--help display this help and exit
--version output version information and exit
3 正常执行shell脚本,并查看
[root@achao libai]# ls
demo.sh
[root@achao libai]# cat demo.sh
#!/bin/bash
while((1))
do
sleep 1
done
[root@achao libai]# ./demo.sh &
[1] 3376
[root@achao libai]# ps -l
F S UID PID PPID C PRI NI ADDR SZ WCHAN TTY TIME CMD
4 S 0 2935 2928 0 80 0 - 29213 do_wai pts/0 00:00:00 bash
0 S 0 3376 2935 0 80 0 - 28320 do_wai pts/0 00:00:00 demo.sh
0 S 0 3386 3376 0 80 0 - 27014 hrtime pts/0 00:00:00 sleep
0 R 0 3387 2935 0 80 0 - 38328 - pts/0 00:00:00 ps
不指定nice值执行shell脚本PID值是3376
4 使用nice指定优先级执行shell脚本
[root@achao libai]# nice -10 ./demo.sh &
[2] 3573
[root@achao libai]# ps -elf | grep demo.sh | grep -v grep
0 S root 3376 2935 0 80 0 - 28320 do_wai 01:39 pts/0 00:00:00 /bin/bash ./demo.sh
0 S root 3573 2935 0 90 10 - 28320 do_wai 01:42 pts/0 00:00:00 /bin/bash ./demo.sh
我们发现NI和PRI的值发生了变化,因此使用nice命令可以直接对进程执行的优先级产生影响,该影响在进行进程调度的时候,会发生很大的作用,不知道宝子们在生产环境中是否遇见过呢?阿超第一次遇见的时候是在shell脚本中的,当时也是一脸懵,只能悄悄查资料学习理解。
5 renice的语法格式
renice的范围是[-20~19]
[root@achao libai]# renice --help
Usage:
renice [-n] <priority> [-p|--pid] <pid>...
renice [-n] <priority> -g|--pgrp <pgid>...
renice [-n] <priority> -u|--user <user>...
Options:
-g, --pgrp <id> interpret argument as process group ID
-n, --priority <num> specify the nice increment value
-p, --pid <id> interpret argument as process ID (default)
-u, --user <name|id> interpret argument as username or user ID
-h, --help display help text and exit
-V, --version display version information and exit
在运行的过程中,如果需要提高或者降低优先级,也是有办法的,这个时候就用renice命令就可以完成。
6 使用renice重置优先级
使用kill -9结束3376进程
[root@achao libai]# kill -9 3376
[1]- Killed ./demo.sh
[root@achao libai]# ps -elf | grep demo.sh | grep -v grep
0 S root 3573 2935 0 90 10 - 28320 do_wai 01:42 pts/0 00:00:00 /bin/bash ./demo.sh
[root@achao libai]# renice 15 -p 3573
3573 (process ID) old priority 10, new priority 15
[root@achao libai]# ps -elf | grep demo.sh | grep -v grep
0 S root 3573 2935 0 95 15 - 28320 do_wai 01:42 pts/0 00:00:00 /bin/bash ./demo.sh
注意:renice命令也是只能通过影响进程的NICE值来改变进程的优先级,而不能直接改变进程的优先级。
一键生成SSL证书:详解Shell脚本实现及OpenSSL应用
OpenSSL简介
OpenSSL是一个强大的开源工具包,用于实现SSL和TLS协议以及提供加密功能。它广泛应用于Web服务器,用于加密HTTPS通信。在本脚本中,我们将使用OpenSSL来生成自签名的CA(证书颁发机构)证书以及服务器证书。
脚本分析
接下来,我们将逐行分析这个Shell脚本,了解它是如何工作的。
CERT_INFO=(
[00]="/O=heaven/CN=ca.god.com"
[01]="cakey.pem"
[02]="cacert.pem"
[03]=2048
[04]=3650
[05]=0
[10]="/C=CN/ST=hubei/L=wuhan/O=Central.Hospital/CN=master.liwenliang.org"
[11]="master.key"
[12]="master.crt"
[13]=2048
[14]=365
[15]=1
[16]="master.csr"
[20]="/C=CN/ST=hubei/L=wuhan/O=Central.Hospital/CN=slave.liwenliang.org"
[21]="slave.key"
[22]="slave.crt"
[23]=2048
[24]=365
[25]=2
[26]="slave.csr"
)
这段定义了一个名为CERT_INFO
的数组,包含了生成证书所需的各种信息,包括证书主题、密钥文件名、证书文件名、密钥长度、有效期、序列号以及CSR(证书签名请求)文件名。
COLOR="echo -e \\E[1;32m"
END="\\E[0m"
DIR=/data
cd $DIR
这几行定义了用于输出彩色文本的命令,并设置了工作目录为/data
。
for i in {0..2};do
if [ $i -eq 0 ] ;then
openssl req -x509 -newkey rsa:${CERT_INFO[${i}3]} -subj ${CERT_INFO[${i}0]} \
-set_serial ${CERT_INFO[${i}5]} -keyout ${CERT_INFO[${i}1]} -nodes -days ${CERT_INFO[${i}4]} \
-out ${CERT_INFO[${i}2]} &>/dev/null
else
openssl req -newkey rsa:${CERT_INFO[${i}3]} -nodes -subj ${CERT_INFO[${i}0]} \
-keyout ${CERT_INFO[${i}1]} -out ${CERT_INFO[${i}6]} &>/dev/null
openssl x509 -req -in ${CERT_INFO[${i}6]} -CA ${CERT_INFO[02]} -CAkey ${CERT_INFO[01]} \
-set_serial ${CERT_INFO[${i}5]} -days ${CERT_INFO[${i}4]} -out ${CERT_INFO[${i}2]} &>/dev/null
fi
$COLOR"**************************************生成证书信息 **************************************"$END
openssl x509 -in ${CERT_INFO[${i}2]} -noout -subject -dates -serial
echo
done
这是脚本的核心部分,通过一个循环,分别为CA和两个服务器生成证书。
-
对于CA(
$i -eq 0
),使用openssl req -x509
命令直接生成自签名的X.509证书。 -
对于服务器证书,首先使用
openssl req
生成CSR,然后使用openssl x509
根据CSR和CA证书生成最终的服务器证书。
chmod 600 *.key
这行代码将所有密钥文件的权限设置为600,确保只有文件所有者可以读写密钥文件,增加安全性。
action "证书生成完成"
这行假设有一个名为action
的函数,用于显示操作结果。虽然脚本中没有定义这个函数,但你可以根据需要自行实现,例如通过简单的echo
命令来输出完成信息。
使用脚本
-
保存脚本:将上述脚本保存为
generate_certs.sh
。 -
赋予权限:运行
chmod +x generate_certs.sh
,使脚本具有执行权限。 -
执行脚本:运行
./generate_certs.sh
,脚本将自动生成所需的证书和密钥。
注意事项
-
确保在运行脚本之前,你已经安装了OpenSSL。
-
根据你的实际需求,可能需要调整证书的有效期、密钥长度等参数。
-
在生产环境中,建议使用受信任的CA颁发的证书,而不是自签名证书。
结语
通过这个简单的Shell脚本,你可以轻松地为你的服务器生成SSL证书,无论是用于开发环境还是测试环境。当然,对于生产环境,建议使用更严格的证书管理策略,并确保定期更新证书,以保障通信安全。希望这篇文章对你有所帮助,如果你有任何问题或建议,欢迎在评论区留言。
18 个一线工作中常用 Shell 脚本
-
1、检测两台服务器指定目录下的文件一致性
-
2、定时清空文件内容,定时记录文件大小
-
3、检测网卡流量,并按规定格式记录在日志中
-
4、计算文档每行出现的数字个数,并计算整个文档的数字总数
-
5、从 FTP 服务器下载文件
-
6、连续输入5个100以内的数字,统计和、最小和最大
-
7、监测 Nginx 访问日志 502 情况,并做相应动作
-
8、将结果分别赋值给变量
-
9、批量修改文件名
-
10、统计当前目录中以 .html 结尾的文件总大
-
11、扫描主机端口状态
-
12、输入数字运行相应命令
-
13、Expect 实现 SSH 免交互执行命令
-
14、监控 httpd 的进程数,根据监控情况做相应处理
-
15、批量修改服务器用户密码
-
16、iptables 自动屏蔽访问网站频繁的IP
-
17、根据web访问日志,封禁请求量异常的IP,如IP在半小时后恢复正常,则解除封禁
-
18、判断用户输入的是否为IP地址
1、检测两台服务器指定目录下的文件一致性
#!/bin/bash
#####################################
#检测两台服务器指定目录下的文件一致性
#####################################
#通过对比两台服务器上文件的md5值,达到检测一致性的目的
dir=/data/web
b_ip=192.168.88.10
#将指定目录下的文件全部遍历出来并作为md5sum命令的参数,进而得到所有文件的md5值,并写入到指定文件中
find $dir -type f|xargs md5sum > /tmp/md5_a.txt
ssh $b_ip "find $dir -type f|xargs md5sum > /tmp/md5_b.txt"
scp $b_ip:/tmp/md5_b.txt /tmp
#将文件名作为遍历对象进行一一比对
for f in `awk '{print 2} /tmp/md5_a.txt'`
do#以a机器为标准,当b机器不存在遍历对象中的文件时直接输出不存在的结果if grep -qw "$f" /tmp/md5_b.txtthenmd5_a=`grep -w "$f" /tmp/md5_a.txt|awk '{print 1}'`md5_b=`grep -w "$f" /tmp/md5_b.txt|awk '{print 1}'`#当文件存在时,如果md5值不一致则输出文件改变的结果if [ $md5_a != $md5_b ]thenecho "$f changed."fielseecho "$f deleted."fi
done
2、定时清空文件内容,定时记录文件大小
#!/bin/bash
################################################################
#每小时执行一次脚本(任务计划),当时间为0点或12点时,将目标目录下的所有文件内
#容清空,但不删除文件,其他时间则只统计各个文件的大小,一个文件一行,输出到以时#间和日期命名的文件中,需要考虑目标目录下二级、三级等子目录的文件
################################################################
logfile=/tmp/`date +%H-%F`.log
n=`date +%H`
if [ $n -eq 00 ] || [ $n -eq 12 ]
then#通过for循环,以find命令作为遍历条件,将目标目录下的所有文件进行遍历并做相应操作for i in `find /data/log/ -type f`dotrue > $idone
elsefor i in `find /data/log/ -type f`dodu -sh $i >> $logfiledone
fi
3、检测网卡流量,并按规定格式记录在日志中
#!/bin/bash
#######################################################
#检测网卡流量,并按规定格式记录在日志中
#规定一分钟记录一次
#日志格式如下所示:
#2019-08-12 20:40
#ens33 input: 1234bps
#ens33 output: 1235bps
######################################################3
while :
do#设置语言为英文,保障输出结果是英文,否则会出现bugLANG=enlogfile=/tmp/`date +%d`.log#将下面执行的命令结果输出重定向到logfile日志中exec >> $logfiledate +"%F %H:%M"#sar命令统计的流量单位为kb/s,日志格式为bps,因此要*1000*8sar -n DEV 1 59|grep Average|grep ens33|awk '{print $2,"\t","input:","\t",$5*1000*8,"bps","\n",$2,"\t","output:","\t",$6*1000*8,"bps"}'echo "####################"#因为执行sar命令需要59秒,因此不需要sleep
done
4、计算文档每行出现的数字个数,并计算整个文档的数字总数
#!/bin/bash
#########################################################
#计算文档每行出现的数字个数,并计算整个文档的数字总数
########################################################
#使用awk只输出文档行数(截取第一段)
n=`wc -l a.txt|awk '{print $1}'`
sum=0
#文档中每一行可能存在空格,因此不能直接用文档内容进行遍历
for i in `seq 1 $n`
do#输出的行用变量表示时,需要用双引号line=`sed -n "$i"p a.txt`#wc -L选项,统计最长行的长度n_n=`echo $line|sed s'/[^0-9]//'g|wc -L`echo $n_nsum=$[$sum+$n_n]
done
echo "sum:$sum"
杀死所有脚本
#!/bin/bash
if [ $# -ne 1 ]; thenecho "Usage: $0 filename"
fi
dir=$(dirname $1)
file=$(basename $1)
ftp -n -v << EOF # -n 自动登录
open 192.168.1.10 # ftp服务器
user admin password
binary # 设置ftp传输模式为二进制,避免MD5值不同或.tar.gz压缩包格式错误
cd $dir
get "$file"
EOF
5、从 FTP 服务器下载文件
#!/bin/bash
if [ $# -ne 1 ]; then echo "Usage: $0 filename"
fi
dir=$(dirname $1)
file=$(basename $1)
ftp -n -v << EOF # -n 自动登录
open 192.168.1.10 # ftp服务器
user admin password
binary # 设置ftp传输模式为二进制,避免MD5值不同或.tar.gz压缩包格式错误
cd $dir
get "$file"
EOF
6、连续输入5个100以内的数字,统计和、最小和最大
#!/bin/bash
COUNT=1
SUM=0
MIN=0
MAX=100
while [ $COUNT -le 5 ]; doread -p "请输入1-10个整数:" INTif [[ ! $INT =~ ^[0-9]+$ ]]; thenecho "输入必须是整数!"exit 1elif [[ $INT -gt 100 ]]; thenecho "输入必须是100以内!"exit 1fiSUM=$(($SUM+$INT))[ $MIN -lt $INT ] && MIN=$INT[ $MAX -gt $INT ] && MAX=$INTlet COUNT++
done
echo "SUM: $SUM"
echo "MIN: $MIN"
echo "MAX: $MAX"
用户猜数字
#!/bin/bash # 脚本生成一个 100 以内的随机数,提示用户猜数字,根据用户的输入,提示用户猜对了,
# 猜小了或猜大了,直至用户猜对脚本结束。
# RANDOM 为系统自带的系统变量,值为 0‐32767的随机数
# 使用取余算法将随机数变为 1‐100 的随机数num=$[RANDOM%100+1]echo "$num"
# 使用 read 提示用户猜数字
# 使用 if 判断用户猜数字的大小关系:‐eq(等于),‐ne(不等于),‐gt(大于),‐ge(大于等于),
# ‐lt(小于),‐le(小于等于)while :
doread -p "计算机生成了一个 1‐100 的随机数,你猜: " caiif [ $cai -eq $num ]thenecho "恭喜,猜对了"exitelif [ $cai -gt $num ]thenecho "Oops,猜大了"elseecho "Oops,猜小了"fi
done
7、监测 Nginx 访问日志 502 情况,并做相应动作
假设服务器环境为 lnmp,近期访问经常出现 502 现象,且 502 错误在重启 php-fpm 服务后消失,因此需要编写监控脚本,一旦出现 502,则自动重启 php-fpm 服务。
#场景:
#1.访问日志文件的路径:/data/log/access.log
#2.脚本死循环,每10秒检测一次,10秒的日志条数为300条,出现502的比例不低于10%(30条)则需要重启php-fpm服务
#3.重启命令为:/etc/init.d/php-fpm restart
#!/bin/bash
###########################################################
#监测Nginx访问日志502情况,并做相应动作
###########################################################
log=/data/log/access.log
N=30 #设定阈值
while :
do#查看访问日志的最新300条,并统计502的次数err=`tail -n 300 $log |grep -c '502" '`if [ $err -ge $N ]then/etc/init.d/php-fpm restart 2> /dev/null#设定60s延迟防止脚本bug导致无限重启php-fpm服务sleep 60fisleep 10
done
8、将结果分别赋值给变量
应用场景:希望将执行结果或者位置参数赋值给变量,以便后续使用。
方法1:
for i in $(echo "4 5 6"); doeval a$i=$i
done
echo $a4 $a5 $a6
方法2:将位置参数192.168.1.1{1,2}拆分为到每个变量
num=0
for i in $(eval echo $*);do #eval将{1,2}分解为1 2let num+=1eval node${num}="$i"
done
echo $node1 $node2 $node3
# bash a.sh 192.168.1.1{1,2}
192.168.1.11 192.168.1.12
方法3:
arr=(4 5 6)
INDEX1=$(echo ${arr[0]})
INDEX2=$(echo ${arr[1]})
INDEX3=$(echo ${arr[2]})
9、批量修改文件名
示例:
# touch article_{1..3}.html
# lsarticle_1.html article_2.html article_3.html
方法1:
for file in $(ls *html); do mv $file bbs_${file#*_} # mv $file $(echo $file |sed -r 's/.*(_.*)/bbs\1/') # mv $file $(echo $file |echo bbs_$(cut -d_ -f2)
方法2:
for file in $(find . -maxdepth 1 -name "*html"); do mv $file bbs_${file#*_}done
方法3:
# rename article bbs *.html
把一个文档前五行中包含字母的行删掉,同时删除6到10行包含的所有字母
1)准备测试文件,文件名为2.txt
第1行1234567不包含字母
第2行56789BBBBBB
第3行67890CCCCCCCC
第4行78asdfDDDDDDDDD
第5行123456EEEEEEEE
第6行1234567ASDF
第7行56789ASDF
第8行67890ASDF
第9行78asdfADSF
第10行123456AAAA
第11行67890ASDF
第12行78asdfADSF
第13行123456AAAA
2)脚本如下:
#!/bin/bash
###############################################################
把一个文档前五行中包含字母的行删掉,同时删除6到10行包含的所有字母
##############################################################
sed -n '1,5'p 2.txt |sed '/[a-zA-Z]/'d
sed -n '6,10'p 2.txt |sed s'/[a-zA-Z]//'g
sed -n '11,$'p 2.txt
#最终结果只是在屏幕上打印结果,如果想直接更改文件,可将输出结果写入临时文件中,再替换2.txt或者使用-i选项
10、统计当前目录中以 .html 结尾的文件总大
方法1:
# find . -name "*.html" -exec du -k {} \; |awk '{sum+=$1}END{print sum}'
方法2:
for size in $(ls -l *.html |awk '{print $5}'); do sum=$(($sum+$size))
done
echo $sum
11、扫描主机端口状态
#!/bin/bash
HOST=$1
PORT="22 25 80 8080"
for PORT in $PORT; doif echo &>/dev/null > /dev/tcp/$HOST/$PORT; thenecho "$PORT open"elseecho "$PORT close"fi
done
用 shell 打印示例语句中字母数小于 6 的单词
#示例语句:
#Bash also interprets a number of multi-character options.
#!/bin/bash
##############################################################
#shell打印示例语句中字母数小于6的单词
##############################################################
for s in Bash also interprets a number of multi-character options.
don=`echo $s|wc -c`if [ $n -lt 6 ]thenecho $sfi
done
12、输入数字运行相应命令
#!/bin/bash
##############################################################
#输入数字运行相应命令
##############################################################
echo "*cmd menu* 1-date 2-ls 3-who 4-pwd 0-exit "
while :
do#捕获用户键入值read -p "please input number :" nn1=`echo $n|sed s'/[0-9]//'g`#空输入检测if [ -z "$n" ]thencontinuefi#非数字输入检测if [ -n "$n1" ]thenexit 0fibreak
done
case $n in1)date;;2)ls;;3)who;;4)pwd;;0)break;;#输入数字非1-4的提示*)echo "please input number is [1-4]"
esac
13、Expect 实现 SSH 免交互执行命令
Expect是一个自动交互式应用程序的工具,如telnet,ftp,passwd等。
需先安装expect软件包。
方法1:EOF 标准输出作为 expect 标准输入
#!/bin/bash
USER=root
PASS=123.com
IP=192.168.1.120
expect << EOFset timeout 30spawn ssh $USER@$IP expect { "(yes/no)" {send "yes\r"; exp_continue} "password:" {send "$PASS\r"}
}
expect "$USER@*" {send "$1\r"}
expect "$USER@*" {send "exit\r"}
expect eof
EOF
方法2:
#!/bin/bash
USER=root
PASS=123.com
IP=192.168.1.120
expect -c "spawn ssh $USER@$IPexpect {\"(yes/no)\" {send \"yes\r\"; exp_continue}\"password:\" {send \"$PASS\r\"; exp_continue}\"$USER@*\" {send \"df -h\r exit\r\"; exp_continue}
}"
方法3:将expect脚本独立出来
登录脚本:
# cat login.exp
#!/usr/bin/expect
set ip [lindex $argv 0]
set user [lindex $argv 1]
set passwd [lindex $argv 2]
set cmd [lindex $argv 3]
if { $argc != 4 } {puts "Usage: expect login.exp ip user passwd"exit 1
}
set timeout 30
spawn ssh $user@$ip
expect {"(yes/no)" {send "yes\r"; exp_continue}"password:" {send "$passwd\r"}
}
expect "$user@*" {send "$cmd\r"}
expect "$user@*" {send "exit\r"}
expect eof
执行命令脚本:写个循环可以批量操作多台服务器
#!/bin/bash
HOST_INFO=user_info.txt
for ip in $(awk '{print $1}' $HOST_INFO)
douser=$(awk -v I="$ip" 'I==$1{print $2}' $HOST_INFO)pass=$(awk -v I="$ip" 'I==$1{print $3}' $HOST_INFO)expect login.exp $ip $user $pass $1
done
Linux主机SSH连接信息:
# cat user_info.txt
192.168.1.120 root 123456
创建10个用户,并分别设置密码,密码要求10位且包含大小写字母以及数字,最后需要把每个用户的密码存在指定文件中 。
#!/bin/bash
##############################################################
#创建10个用户,并分别设置密码,密码要求10位且包含大小写字母以及数字
#最后需要把每个用户的密码存在指定文件中
#前提条件:安装mkpasswd命令
##############################################################
#生成10个用户的序列(00-09)
for u in `seq -w 0 09`
do#创建用户useradd user_$u#生成密码p=`mkpasswd -s 0 -l 10`#从标准输入中读取密码进行修改(不安全)echo $p|passwd --stdin user_$u#常规修改密码echo -e "$p\n$p"|passwd user_$u#将创建的用户及对应的密码记录到日志文件中echo "user_$u $p" >> /tmp/userpassword
done
14、监控 httpd 的进程数,根据监控情况做相应处理
#!/bin/bash
###############################################################################################################################
#需求:
#1.每隔10s监控httpd的进程数,若进程数大于等于500,则自动重启Apache服务,并检测服务是否重启成功
#2.若未成功则需要再次启动,若重启5次依旧没有成功,则向管理员发送告警邮件,并退出检测
#3.如果启动成功,则等待1分钟后再次检测httpd进程数,若进程数正常,则恢复正常检测(10s一次),否则放弃重启并向管理员发送告警邮件,并退出检测
###############################################################################################################################
#计数器函数
check_service()
{j=0for i in `seq 1 5`do#重启Apache的命令/usr/local/apache2/bin/apachectl restart 2> /var/log/httpderr.log#判断服务是否重启成功if [ $? -eq 0 ]thenbreakelsej=$[$j+1]fi#判断服务是否已尝试重启5次if [ $j -eq 5 ]thenmail.pyexitfidone
}
while :
don=`pgrep -l httpd|wc -l`#判断httpd服务进程数是否超过500if [ $n -gt 500 ]then/usr/local/apache2/bin/apachectl restartif [ $? -ne 0 ]thencheck_serviceelsesleep 60n2=`pgrep -l httpd|wc -l`#判断重启后是否依旧超过500if [ $n2 -gt 500 ]thenmail.pyexitfififi#每隔10s检测一次sleep 10
done
15、批量修改服务器用户密码
Linux主机SSH连接信息:旧密码
# cat old_pass.txt
192.168.18.217 root 123456 22
192.168.18.218 root 123456 22
内容格式:IP User Password Port
SSH远程修改密码脚本:新密码随机生成
#!/bin/bash
OLD_INFO=old_pass.txt
NEW_INFO=new_pass.txt
for IP in $(awk '/^[^#]/{print $1}' $OLD_INFO); do USER=$(awk -v I=$IP 'I==$1{print $2}' $OLD_INFO) PASS=$(awk -v I=$IP 'I==$1{print $3}' $OLD_INFO) PORT=$(awk -v I=$IP 'I==$1{print $4}' $OLD_INFO) NEW_PASS=$(mkpasswd -l 8) # 随机密码 echo "$IP $USER $NEW_PASS $PORT" >> $NEW_INFO expect -c " spawn ssh -p$PORT $USER@$IP set timeout 2 expect { \"(yes/no)\" {send \"yes\r\";exp_continue} \"password:\" {send \"$PASS\r\";exp_continue} \"$USER@*\" {send \"echo \'$NEW_PASS\' |passwd --stdin $USER\r exit\r\";exp_continue} }"
done
生成新密码文件:
# cat new_pass.txt
192.168.18.217 root n8wX3mU% 22
192.168.18.218 root c87;ZnnL 22
16、iptables 自动屏蔽访问网站频繁的IP
场景:恶意访问,安全防范
1)屏蔽每分钟访问超过200的IP
方法1:根据访问日志(Nginx为例)
#!/bin/bash
DATE=$(date +%d/%b/%Y:%H:%M)
ABNORMAL_IP=$(tail -n5000 access.log |grep $DATE |awk '{a[$1]++}END{for(i in a)if(a[i]>100)print i}')
#先tail防止文件过大,读取慢,数字可调整每分钟最大的访问量。awk不能直接过滤日志,因为包含特殊字符。
for IP in $ABNORMAL_IP; doif [ $(iptables -vnL |grep -c "$IP") -eq 0 ];theniptables -I INPUT -s $IP -j DROPfi
done
方法2:通过TCP建立的连接
#!/bin/bash
ABNORMAL_IP=$(netstat -an |awk '$4~/:80$/ && $6~/ESTABLISHED/{gsub(/:[0-9]+/,"",$5);{a[$5]++}}END{for(i in a)if(a[i]>100)print i}')
#gsub是将第五列(客户端IP)的冒号和端口去掉
for IP in $ABNORMAL_IP; doif [ $(iptables -vnL |grep -c "$IP") -eq 0 ]; theniptables -I INPUT -s $IP -j DROPfi
done
2)屏蔽每分钟SSH尝试登录超过10次的IP
方法1:通过lastb获取登录状态:
#!/bin/bash
DATE=$(date +"%a %b %e %H:%M") #星期月天时分 %e单数字时显示7,而%d显示07
ABNORMAL_IP=$(lastb |grep "$DATE" |awk '{a[$3]++}END{for(i in a)if(a[i]>10)print i}')
for IP in $ABNORMAL_IP; doif [ $(iptables -vnL |grep -c "$IP") -eq 0 ];theniptables -I INPUT -s $IP -j DROPfi
done
方法2:通过日志获取登录状态
#!/bin/bash
DATE=$(date +"%b %d %H")
ABNORMAL_IP="$(tail -n10000 /var/log/auth.log |grep "$DATE" |awk '/Failed/{a[$(NF-3)]++}END{for(i in a)if(a[i]>5)print i}')"
for IP in $ABNORMAL_IP; do if [ $(iptables -vnL |grep -c "$IP") -eq 0 ]; then iptables -A INPUT -s $IP -j DROP echo "$(date +"%F %T") - iptables -A INPUT -s $IP -j DROP" >>~/ssh-login-limit.log fi
done
17、根据web访问日志,封禁请求量异常的IP,如IP在半小时后恢复正常,则解除封禁
#!/bin/bash
####################################################################################
#根据web访问日志,封禁请求量异常的IP,如IP在半小时后恢复正常,则解除封禁
####################################################################################
logfile=/data/log/access.log
#显示一分钟前的小时和分钟
d1=`date -d "-1 minute" +%H%M`
d2=`date +%M`
ipt=/sbin/iptables
ips=/tmp/ips.txt
block()
{#将一分钟前的日志全部过滤出来并提取IP以及统计访问次数grep '$d1:' $logfile|awk '{print $1}'|sort -n|uniq -c|sort -n > $ips#利用for循环将次数超过100的IP依次遍历出来并予以封禁for i in `awk '$1>100 {print $2}' $ips`do$ipt -I INPUT -p tcp --dport 80 -s $i -j REJECTecho "`date +%F-%T` $i" >> /tmp/badip.logdone
}
unblock()
{#将封禁后所产生的pkts数量小于10的IP依次遍历予以解封for a in `$ipt -nvL INPUT --line-numbers |grep '0.0.0.0/0'|awk '$2<10 {print $1}'|sort -nr`do$ipt -D INPUT $adone$ipt -Z
}
#当时间在00分以及30分时执行解封函数
if [ $d2 -eq "00" ] || [ $d2 -eq "30" ]
then#要先解再封,因为刚刚封禁时产生的pkts数量很少unblockblock
elseblock
fi
18、判断用户输入的是否为IP地址
方法1:
#!/bin/bash
function check_ip(){ IP=$1 VALID_CHECK=$(echo $IP|awk -F. '$1< =255&&$2<=255&&$3<=255&&$4<=255{print "yes"}') if echo $IP|grep -E "^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$">/dev/null; then if [ $VALID_CHECK == "yes" ]; then echo "$IP available." else echo "$IP not available!" fi else echo "Format error!" fi
}
check_ip 192.168.1.1
check_ip 256.1.1.1
方法2:
#!/bin/bash
function check_ip(){ IP=$1 if [[ $IP =~ ^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$ ]]; then FIELD1=$(echo $IP|cut -d. -f1) FIELD2=$(echo $IP|cut -d. -f2) FIELD3=$(echo $IP|cut -d. -f3) FIELD4=$(echo $IP|cut -d. -f4) if [ $FIELD1 -le 255 -a $FIELD2 -le 255 -a $FIELD3 -le 255 -a $FIELD4 -le 255 ]; then echo "$IP available." else echo "$IP not available!" fi else echo "Format error!" fi
}
check_ip 192.168.1.1
check_ip 256.1.1.1
增加版:
加个死循环,如果IP可用就退出,不可用提示继续输入,并使用awk判断。
#!/bin/bash
function check_ip(){ local IP=$1 VALID_CHECK=$(echo $IP|awk -F. '$1< =255&&$2<=255&&$3<=255&&$4<=255{print "yes"}') if echo $IP|grep -E "^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$" >/dev/null; then if [ $VALID_CHECK == "yes" ]; then return 0 else echo "$IP not available!" return 1 fi else echo "Format error! Please input again." return 1 fi
}
while true; do read -p "Please enter IP: " IP check_ip $IP [ $? -eq 0 ] && break || continue
done
相关文章:
实战:shell脚本练习
高效编写Bash脚本的技巧 总结了10个实用技巧,帮助提高脚本的效率和可靠性,具体包括: 多写注释:在脚本中添加注释,以帮助理解脚本的不同部分。 当运行失败时使脚本退出:使用set -o errexit或set -e&#x…...
常见排序算法总结
文章目录 比较排序冒泡排序选择排序插入排序归并排序快速排序堆排序希尔排序 非比较排序(桶排序)计数排序基数排序 比较排序 冒泡排序 嵌套循环,每次内层循环执行时,数组的每两个元素交换,将一个最大/小的数排到数组…...
网页HTTP协议 get请求和post请求区别?(HTTP中Get、Post、Put与Delete的区别)(HTTP请求方法、HTTP请求方式、HTTP方法)
文章目录 设计GET、POST、DELETE 等多种请求方法的原因1. 符合语义化设计2. 允许服务器对不同的请求方法进行优化处理3. 提高数据传输的安全性4. 遵循现有的网络架构5. 提高网络通信的效率6. 支持 RESTful API 设计 设计GET、POST、DELETE 等多种请求方法的原因 后端之所以要分…...
攻防世界 re新手模式
Reversing-x64Elf-100 64位ida打开 看if语句,根据i的不同,选择不同的数组,后面的2*i/3选择数组中的某一个元素,我们输入的是a1 直接逆向得到就行 二维字符数组写法:前一个是代表有几个字符串,后一个是每…...
Ajax是什么?如何在HTML5中使用Ajax?
Ajax是什么,它如何工作? Ajax是什么 Ajax,全称Asynchronous Javascript And XML(异步JavaScript和XML),是一种创建交互式网页应用的网页开发技术。它允许网页在不重新加载整个页面的情况下,与…...
Python+Flask+MySQL/Sqlite的个人博客系统(前台+后端管理)【附源码,运行简单】
PythonFlaskMySQL/Sqlite的个人博客系统(前台后端管理)【附源码,运行简单】 总览 1、《个人博客系统》1.1 方案设计说明书设计目标工具列表 2、详细设计2.1 管理员登录2.2 程序主页面2.3 笔记新增界面2.4 文章新增界面2.5 文章/笔记管理界面2…...
【Android性能优化】Android CPU占用率检测原理和优化方向
【Android性能优化】Android CPU占用率检测原理和优化方向 CPU相关知识 CPU占用的基本计算公式 (1 - 空闲态运行时间/总运行时间) * 100% Hz、Tick、Jiffies: Hz:Linux核心每隔固定周期会发出timer interrupt (IRQ 0),HZ是用来定义每一秒有…...
AWS Certified Developer Associate备考笔记
AWS Certified Developer Associate备考笔记 缓慢更新中,如果你也正在关注该考试,请点赞后评论感兴趣的章节,可加快我的更新速度 😃 文章目录 AWS Certified Developer Associate备考笔记一、IAM二、EC2三、EC2 Instance Storage…...
数据质量8个衡量标准
在数据驱动的时代,数据质量对于企业的决策和业务运营至关重要。为了确保数据的有效性和可靠性,我们需要根据一些关键要素来衡量数据的质量。本文将介绍数据质量的8个衡量标准,包括准确性、精确性、真实性、及时性、即时性、完整性、全面性和关…...
Redis 跳跃列表与紧凑列表
Redis 跳跃列表(Skip List) 跳跃列表是一种高效的数据结构,它结合了有序数组和链表的优点,能够在 O(log n) 时间内进行插入、删除和查找操作。Redis 使用跳跃列表来实现有序集合(sorted set)的底层数据结构…...
达梦数据库的系统视图v$arch_status
达梦数据库的系统视图v$arch_status 在达梦数据库(DM Database)中,V$ARCH_STATUS 是一个动态性能视图(Dynamic Performance View),用于显示归档日志的状态信息。这个视图可以帮助数据库管理员监控和管理数…...
【Rust光年纪】Rust 中常用的数据库客户端库:核心功能与使用场景
探秘 Rust 语言下的多种数据库客户端库:从安装到实际应用 前言 在现代的软件开发中,数据库是不可或缺的一部分。为了与数据库进行交互,开发人员需要使用各种数据库客户端来执行操作、构建查询等。本文将介绍一些用于 Rust 语言的常见数据库…...
网络安全防御【防火墙双机热备带宽管理综合实验】
目录 一、实验拓扑图 二、实验要求 三、实验思路: 四、实验步骤: 1、FW3的网络相关配置: 2、FW1的新增配置: 3、交换机LSW6(总公司)的新增配置: 4、双机热备技术配置(双机热…...
19.x86游戏实战-创建MFC动态链接库
免责声明:内容仅供学习参考,请合法利用知识,禁止进行违法犯罪活动! 本次游戏没法给 内容参考于:微尘网络安全 工具下载: 链接:https://pan.baidu.com/s/1rEEJnt85npn7N38Ai0_F2Q?pwd6tw3 提…...
图论建模技巧搜集
一些经典题目 找可达路径 UVa - 11604 General Sultan 平面图最小割对偶图最短路 UVa - 1376 Animal Run 最小割建模 UVa - 1515 Pool construction 费用流建模 洛谷P3159 [CQOI2012] 交换棋子 一些可以转化为二分图最大权匹配的建模题 UVa1006/LA2238 Fixed Partition Me…...
pytorch学习(九)激活函数
1.pytorch常用激活函数如下: #ReLU激活函数 #Leaky ReLU激活函数 #Sigmoid激活函数 #Tanh激活函数 #Softmax激活函数 #Softplus2.代码 import torch.nn as nn import torch import numpy from torch.utils.tensorboard import SummaryWriterwriter SummaryWriter…...
conda 环境打包与使用
conda 环境导出 使用 Conda 打包环境,可以创建一个可重复使用的环境文件,便于在不同的机器上重新创建相同的环境。以下是具体的步骤: 1. 创建 Conda 环境 如果你还没有创建一个 Conda 环境,可以使用以下命令创建一个新环境&…...
jenkins 插件版本冲突
一、Jenkins安装git parameter 插件重启后报错与临时解决方案 cd /root/.jenkins cp config.xml config.xml.bak vim config.xml <authorizationStrategy class"hudson.security.FullControlOnceLoggedInAuthorizationStrategy"><denyAnonymousReadAcces…...
Python print() 格式化输出
Python print{} 格式化输出 1. print()2. 浮点数 (float)References 1. print() 传递给函数的值称为参数。 引号没有打印在屏幕上,它们只是表示字符串的起止,不是字符串的一部分。可以用这个函数在屏幕上打印出空行,只要调用 print() 就可以…...
【Qt+opencv】计时函数与图像变换
文章目录 前言计算时间函数图像变换旋转镜像缩放 总结 前言 在图像处理和计算机视觉的应用中,我们经常需要对图像进行各种变换,如旋转、缩放、剪切等。同时,为了评估算法的性能,我们也需要对代码的执行时间进行精确的测量。OpenC…...
nodejs下载+react安装
一、nodejs安装 1、nodejs下载 具体安装可参考连接:2023最新版Node.js下载安装及环境配置教程(非常详细)从零基础入门到精通,看完这一篇就够了_nodejs安装及环境配置-CSDN博客 下载地址:Node.js — 下载 Node.js 测…...
linux service小例
linux service 测试 1.创建一个app // myapp.c // 间隔10s写入时间到文件 #include <stdio.h> #include <time.h> #include <unistd.h> // 引入unix标准函数定义,如sleep()int main() {FILE *fp;time_t now;char buffer[80];// 打开文件以追加模…...
iOS 开发包管理之 Swift Package Manager
这是由官方推出,用于管理分发 swift 代码的工具。这个在 Xcode 是天然的存在,就是说我们不用安装就能够直接使用。 File > Add Package Dependencies… 在弹出来窗口选择一些库来导入 又或者点左下角的“” > Add Package Collection… 添加完成…...
【C语言初阶】C语言数组基础:从定义到遍历的全面指南
📝个人主页🌹:Eternity._ ⏩收录专栏⏪:C语言 “ 登神长阶 ” 🤡往期回顾🤡:C语言函数 🌹🌹期待您的关注 🌹🌹 ❀数组 📒1. 什么是数组…...
AI开源战争的真相
引言 在AI技术迅猛发展的今天,开源与闭源之争成为了AI圈内最热的话题之一。大模型免费开放的背后到底隐藏着什么样的真相?这是一个令人困惑的问题。本文将深入探讨开源与闭源之争的历史背景、技术演进以及商业利益的博弈。 开源概念的起源 开源软件的…...
使用Java填充Word模板的技术详解
目录 概述常见的Java Word处理库 Apache POIAspose.Words for JavaDocx4j 使用Apache POI填充Word模板 创建和读取Word文档填充文本填充表格 使用Aspose.Words for Java填充Word模板 创建和读取Word文档填充文本填充表格 使用Docx4j填充Word模板 创建和读取Word文档填充文本填…...
vmware配置centos+配置静态ip联网+更换镜像
centos7配置参考【实战】VMware17虚拟机以及Centos7详细安装教程-CSDN博客 ip配置步骤: 先更改编辑虚拟网络编辑器中的内容 就按照还原默认设置来,设定后就是以上内容,然后一定要记住子网ip和子网掩码 接下来就是NAT设置: 网关…...
广州数据中心服务器搬迁方案
设备搬迁的准备工作涵盖资料准备、环境准备、计划细化等工作。资料准备主要是对旧机房的整理工作,对所搬运的设备进行资料整理,首先对每台设备建立基本情况、位置说明、系统关联性、搬迁批次及工作步骤等的设备档案,然后在档案资料收集完的基…...
uniapp开发钉钉小程序流程
下载开发工具 1、小程序开发工具 登录钉钉开发平台,根据自己的需求下载合适的版本,我这里下载的是Windows (64位)版本 小程序开发工具 - 钉钉开放平台 2、HBuilder X HBuilderX-高效极客技巧 新建项目及相关配置 新建项目 …...
河南萌新联赛2024第(一)场:河南农业大学 A D F G H I K
A 造数 题目描述: 给定一个整数 𝑛 ,你可以进行以下三种操作 操作1: 1 操作2; 2 操作3: 2 问最少需要多少次操作可以将 0 转为为 𝑛 。 解题思路 操作1,2,3。操作 3 …...
免费做优化的网站建设/app注册接单平台
一. 开发背景 想要成为一名优秀的Android开发,你需要一份完备的知识体系,在这里,让我们一起成长为自己所想的那样。 正文 腾讯研发人数将近 2 万人,T4 级别的人数大概也不超过 500 人,这还是在近两年 T3 到 T4 级别人…...
django做网站比较容易/深圳网络推广大师
声明使用的JDK9&Tomcat9版本; ① cookie的有效路径仅仅能被 其自身和其子路径访问; ② 当cookie的有效路径为 / 时候,web项目下所有的路径均可以访问到 cookie; 测试如下: 创建cookie: 访问 serv…...
网站制作价格范围/学企业管理培训班
今天考试,然后碰到一个数据类型的问题,气死我了。 int --->4B unsigned int ->4B unsigned short ->2B long a->8B unsigned short a->2B short a->2B unsigned long a->8B long long a->4B转载于:https://www.cnblogs.com/epir…...
百度推广 网站建设/seo网站关键词优化价格
sql中的取模,取整,字符串连接等操作:c a mod b ;//取模c trunc(a/b);//取整//连接两个字符串,sql中不能用号连接两个字符串c a || b;或c concat(a,b);----------------------------------------------------------关于Oracle取整的函数分别有以下几种:1.取整(大) select ce…...
最牛视频网站建设/长沙seo网站推广
你心中的阳光房是什么样的?又宽又厚的钢结构加上钢化玻璃组成的非常笨重的阳光房?冬天还好,可一到夏天升温极快,非常的闷热吗?情愿只做一个阳光顶用来遮阳挡雨也不做阳光房吗?现在这些都是过去式了…...
线下推广渠道/seo常见的优化技术
记录下有用的半导体论坛 http://bbs.eetop.cn/...