shell脚本上
| 对于初学者而言,因为没有实战经验,写不出来 Shell 脚本 很正常,如果工作了几年的运维老年还是写不出来,那就是没主动找需求,缺乏练习,缺乏经验。针对以上问题,总结了30个生产环境中经典的 Shell 脚本 ,通过这些需求案例,希望能帮助大家提升Shell编写思路,掌握编写技巧。 | 先了解下编写Shell过程中注意事项: 开头加解释器:#!/bin/bash 语法缩进,使用四个空格;多加注释说明。 命名建议规则:变量名大写、局部变量小写,函数名小写,名字体现出实际作用。 默认变量是全局的,在函数中变量local指定为局部变量,避免污染其他作用域。 有两个 命令 能帮助我调试脚本:set -e 遇到执行非0时退出脚本,set-x 打印执行过程。 写脚本一定先测试再到生产上。 1、获取随机字符串或数字 获取随机8位字符串: 方法1: 471b94f2 方法2: vg3BEg== 方法3: ed9e032c 获取随机8位数字: 方法1: 23648321 方法2: 38571131 方法3: 69024815 cksum:打印CRC效验和统计字节 2、定义一个颜色输出字符串函数 方法1: function echo_color() { if [ 2\033[0m" elif [ 2\033[0m" fi } 方法2: function echo_color() { case 2[0m" ;; red) echo -e "[31;40m$2[0m" ;; *) echo "Example: echo_color red string" esac } 使用方法:echo_color green "test" function关键字定义一个函数,可加或不加。 3、批量创建用户 #!/bin/bash DATE= 1 == "green" ]; then echo -e "[32;40m 1 == "red" ]; then echo -e "[31;40m$2[0m" fi } if [ -s USER_FILE {DATE}.bak echo_color green " {USER_FILE}- USER_FILE echo "----------------" >> USER &>/dev/null; then PASS= RANDOM |md5sum |cut -c 1-8) useradd PASS |passwd --stdin USER USER_FILE echo " USER User already exists!" fi done 4、检查软件包是否安装 #!/bin/bash if rpm -q sysstat &>/dev/null; then echo "sysstat is already installed." else echo "sysstat is not installed!" fi 5、检查服务状态 #!/bin/bash PORT_C= (ps -ef |grep ntpd |grep -vc grep) if [ PS_C -eq 0 ]; then echo "内容" | mail -s "主题" [email protected] fi 6、检查主机存活状态 方法1:将错误IP放到数组里面判断是否ping失败三次 IP_LIST="192.168.18.1 192.168.1.1 192.168.18.2" for IP in NUM -le 3 ]; do if ping -c 1 IP Ping is successful." break else # echo " NUM" FAIL_COUNT[ IP let NUM++ fi done if [ {FAIL_COUNT[1]} Ping is failure!" unset FAIL_COUNT[*] fi done 方法2:将错误次数放到FAIL_COUNT变量里面判断是否ping失败三次 IP_LIST="192.168.18.1 192.168.1.1 192.168.18.2" for IP in IP >/dev/null; then echo " IP Ping is failure FAIL_COUNT -eq 3 ]; then echo "$IP Ping is failure!" fi done 方法3:利用for循环将ping通就跳出循环继续,如果不跳出就会走到打印ping失败 ping_success_status() { if ping -c 1 IP Ping is successful." continue fi } IP_LIST="192.168.18.1 192.168.1.1 192.168.18.2" for IP in IP Ping is failure!" done 7、监控CPU、内存和硬盘利用率 1)CPU 借助vmstat工具来分析CPU统计信息。 DATE= (ifconfig eth0 |awk -F [ :]+ /inet addr/{print (vmstat |awk NR==3{print (vmstat |awk NR==3{print (vmstat |awk NR==3{print (vmstat |awk NR==3{print (( SY)) if [ DATE Host: USE " | mail -s "CPU Monitor" $MAIL fi 2)内存 DATE= (ifconfig eth0 |awk -F [ :]+ /inet addr/{print (free -m |awk /Mem/{print (free -m |awk /Mem/{print 6- (( USE)) if [ DATE Host: TOTAL,Use= FREE " | mail -s "Memory Monitor" $MAIL fi 3)硬盘 DATE= (ifconfig eth0 |awk -F [ :]+ /inet addr/{print (fdisk -l |awk -F [: ]+ BEGIN{OFS="="}/^Disk /dev/{printf "%s=%sG,", 3} ) PART_USE= 1,int( 6} ) for i in (echo (echo (echo USE -gt 80 ]; then echo " Date: IP Total: PART= MOUNT) " | mail -s "Disk Monitor" $MAIL fi done 8、批量主机磁盘利用率监控 前提监控端和被监控端SSH免交互登录或者密钥登录。 写一个配置文件保存被监控主机SSH连接信息,文件内容格式:IP User Port HOST_INFO=host.info for IP in 1} (awk -v ip= 1{print HOST_INFO) PORT= IP ip== 3} PORT IP df -h > (awk BEGIN{OFS="="}/^/dev/{print 5)} USE_RATE_LIST; do PART_NAME= {USE_RATE#*=} if [ PART_NAME Partition usage $USE_RATE%!" fi done done 9、检查网站可用性 1)检查URL可用性 方法1: check_url() { HTTP_CODE= 1) if [ 1 Access failure!" fi } 方法2: check_url() { if ! wget -T 10 --tries=1 --spider $1 >/dev/null 2>&1; then } 使用方法:check_url www.baidu.com 2)判断三次URL可用性 思路与上面检查主机存活状态一样。 方法1:利用循环技巧,如果成功就跳出当前循环,否则执行到最后一行 check_url() { HTTP_CODE= 1) if [ URL_LIST; do check_url URL check_url URL Access failure!" done 方法2:错误次数保存到变量 URL_LIST=" www.baidu.com www.agasgf.com " for URL in (curl -o /dev/null --connect-timeout 3 -s -w "%{http_code}" HTTP_CODE -ne 200 ]; then let FAIL_COUNT++ else break fi done if [ URL Access failure!" fi done 方法3:错误次数保存到数组 URL_LIST=" www.baidu.com www.agasgf.com " for URL in NUM -le 3 ]; do HTTP_CODE= URL) if [ NUM]= NUM下标, {#FAIL_COUNT[ ]} -eq 3 ]; then echo "Warning: $URL Access failure!" unset FAIL_COUNT[ ] #清空数组 fi done 10、检查MySQL主从同步状态 #!/bin/bash USER=bak PASSWD=123456 IO_SQL_STATUS= USER -p 0} ) #gsub去除冒号后面的空格 for i in {i%:*} THREAD_STATUS= THREAD_STATUS" != "Yes" ]; then echo "Error: MySQL Master-Slave THREAD_STATUS!" fi done 动手练一练,让你的Shell功底上升一个段位!
如何编写一个shell脚本
首先打开编程界面,查看现在dog目录下的文件的权限信息。现在b.txt的用户权限是RW,组权限是RW,其他权限是R。现在我给用户权限加上X运行权限。新建一个文件shell脚本一般用×.sh作为后缀当然勇气他的也可以。打开终端输入touchfirst.sh新建一个名为first的shell脚本。在shell脚本中可以使用三类命令:1)Unix命令:虽然在shell脚本中可以使用任意的unix命令,但是还是由一些相对更常用的命令。这些命令通常是用来进行文件和文字操作的。在UNIX/Linux下面编写一个SHELL脚本程序并不难,只要全屏幕编辑程序vi使用得熟练,即可以编写SHELL脚本程序。
Linux shell常用命令
Linux shell常用命令汇总
对于经常使用linux系统的博主来说,基本常用的shell命令是少不了的,下面为大家总结了Linux shell的常用命令,希望对大家有所帮助!
1.检查远程端口是否对bash开放:
echo >/dev/tcp/8.8.8.8/53 && echo "open"
2.让进程转入后台:
Ctrl + z
3、将进程转到前台:
fg
4.产生随机的十六进制数,其中n是字符数:
openssl rand -hex n
5.在当前shell里执行一个文件里的命令:
source /home/user/file.name
6.截取前5个字符:
${variable:0:5}
7.SSH debug 模式:
ssh -vvv user@ip_address
8.SSH with pem key:
ssh user@ip_address -i key.pem
9.用wget抓取完整的网站目录结构,存放到本地目录中:
wget -r --no-parent --reject "index.html*" http://hostname/ -P /home/user/dirs
10.一次创建多个目录:
mkdir -p /home/user/{test,test1,test2}
11.列出包括子进程的进程树:
ps axwef
12.创建 war 文件:
jar -cvf name.war file
13.测试硬盘写入速度:
dd if=/dev/zero of=/tmp/output.img bs=8k count=256k; rm -rf /tmp/output.img
14.测试硬盘读取速度:
hdparm -Tt /dev/sda
15.获取文本的md5 hash:
echo -n "text" | md5sum
16.检查xml格式:
xmllint --noout file.xml
17.将tar.gz提取到新目录里:
tar zxvf package.tar.gz -C new_dir
18.使用curl获取HTTP头信息:
curl -I http://www.example.com
19.修改文件或目录的时间戳(YYMMDDhhmm):
touch -t 0712250000 file
20.用wget命令执行ftp下载:
wget -m ftp://username:password@hostname
21.生成随机密码(例子里是16个字符长):
LANG=c < /dev/urandom tr -dc _A-Z-a-z-0-9 | head -c${1:-16};echo;
22.快速备份一个文件:
cp some_file_name{,.bkp}
23.访问Windows共享目录:
smbclient -U "DOMAIN\user" //dc.domain.com/share/test/dir
24.执行历史记录里的命令(这里是第100行):
!100
25.解压:
unzip package_name.zip -d dir_name
26.输入多行文字(CTRL + d 退出):
cat > test.txt
27.创建空文件或清空一个现有文件:
\> test.txt
28.与Ubuntu NTP server同步时间:
ntpdate ntp.ubuntu.com
29.用netstat显示所有tcp4监听端口:
netstat -lnt4 | awk '{print $4}' | cut -f2 -d: | grep -o '[0-9]*'
30.qcow2镜像文件转换:
qemu-img convert -f qcow2 -O raw precise-server-cloudimg-amd64-disk1.img \precise-server-cloudimg-amd64-disk1.raw
31.重复运行文件,显示其输出(缺省是2秒一次):
watch ps -ef
32.所有用户列表:
getent passwd
33.Mount root in read/write mode:
mount -o remount,rw /
34.挂载一个目录(这是不能使用链接的情况):
mount --bind /source /destination
35.动态更新DNS server:
nsupdate
update add $HOST 86400 A $IP
send
EOF
36.递归grep所有目录:
grep -r "some_text" /path/to/dir
37.列出前10个最大的文件:
lsof / | awk '{ if($7 > 1048576) print $7/1048576 "MB "$9 }' | sort -n -u | tail
39.打开Vim并跳到文件末:
vim + some_file_name
40.Git 克隆指定分支(master):
git clone [email protected]:name/app.git -b master
41.Git 切换到其它分支(develop):
git checkout develop
42.Git 删除分支(myfeature):
git branch -d myfeature
43.Git 删除远程分支
git push origin :branchName
44.Git 将新分支推送到远程服务器:
git push -u origin mynewfeature
45.打印历史记录中最后一次cat命令:
!cat:p
46.运行历史记录里最后一次cat命令:
!cat
47.找出/home/user下所有空子目录:
echo >/dev/tcp/8.8.8.8/53 && echo "open"
1.检查远程端口是否对bash开放:
find /home/user -maxdepth 1 -type d -empty
48.获取test.txt文件中第50-60行内容:
< test.txt sed -n '50,60p'
49.运行最后一个命令(如果最后一个命令是mkdir /root/test, 下面将会运行: sudo mkdir /root/test):
sudo !!
50.创建临时RAM文件系统 – ramdisk (先创建/tmpram目录):
mount -t tmpfs tmpfs /tmpram -o size=512m
51.Grep whole words:
grep -w "name" test.txt
52.在需要提升权限的.情况下往一个文件里追加文本:
echo "some text" | sudo tee -a /path/file
53.列出所有kill signal参数:
kill -l
54.在bash历史记录里禁止记录最后一次会话:
kill -9 $$
55.扫描网络寻找开放的端口:
nmap -p 8081 172.20.0.0/16
56.设置git email:
git config --global user.email "[email protected]"
57.To sync with master if you have unpublished commits:
git pull --rebase origin master
58.将所有文件名中含有”txt”的文件移入/home/user目录:
find -iname "*txt*" -exec mv -v {} /home/user \;
59.将文件按行并列显示:
paste test.txt test1.txt
60.shell里的进度条:
pv data.log
61.使用netcat将数据发送到Graphite server:
echo "hosts.sampleHost 10 `date +%s`" | nc 192.168.200.2 3000
62.将tabs转换成空格:
expand test.txt > test1.txt
63.Skip bash history:
cmd
64.去之前的工作目录:
cd -
65.拆分大体积的tar.gz文件(每个100MB),然后合并回去:
split –b 100m /path/to/large/archive /path/to/output/files
cat files* > archive
66.使用curl获取HTTP status code:
curl -sL -w "%{http_code}\\n" www.example.com -o /dev/null
67.设置root密码,强化MySQL安全安装:
/usr/bin/mysql_secure_installation
68.当Ctrl + c不好使时:
Ctrl + \
69.获取文件owner:
stat -c %U file.txt
70.block设备列表:
lsblk -f
71.找出文件名结尾有空格的文件:
find . -type f -exec egrep -l " +$" {} \;
72.找出文件名有tab缩进符的文件
find . -type f -exec egrep -l $'\t' {} \;
73.用”=”打印出横线:全选复制放进笔记
printf '%100s\n' | tr ' ' = ;
关于Linux下的shell
连接上主机的一套输入输出设备就叫终端。比如显示器和键盘。
以前,如果想同时用两个用户登陆,你得备两套终端吧。。
现在的类UNIX系统都提供了“终端模拟器”程序,开一个窗口相当于连上一台终端。
shell字面是外壳程序。处于操作系统内核和应用程序之间。是用户和系统交互的界面。也理解成命令解释器。
区别如上。
不同的shell有不同的特性。
比如csh,不支持定义函数,但是语法和c语言很像,比较适合执行简单的单命令任务。bash是linux的标配,就支持函数了。各种shell在功能的丰富程度上各不相同,选择自己需要的来用了。
经典的UNIX的root的默认shell是sh,功能很少,当然也强迫你操作时必需仔细小心,linux把sh链到了bash了。ksh也是以前用得很多的,好多既存的脚本也是用ksh写的。
功能最强的可能是zsh了吧,我是没有用过,楼主有兴趣研究研究。:)