Linux Shell 小脚本经典收藏

转自http://www.cnblogs.com/Javame/p/3867686.html

1、在两个文件中找出相同的号码

diff -y xx.txt oo.txt | egrep -v "<|>" | awk '{print $2}'

2、打印第几行到第几行之间

cat 1 | awk 'NR==2,NR==4{print}'

 

1、删除Linux远程用户连接会话

[root@tradx24 logs]# w
 10:45:28 up 15 days, 16:23, 4 users, load average: 0.00, 0.00, 0.00 USER TTY FROM LOGIN@ IDLE JCPU PCPU WHAT root tty1 - Sun21 4days 0.00s 0.00s -bash root pts/0 192.168.1.2 09:11 0.00s 0.07s 0.00s w root pts/2 192.168.1.2 09:45 30:53 0.07s 0.07s -bash root pts/3 192.168.1.8 10:20 22:05 0.02s 0.00s vi operation.log [root@tradx24 logs]# skill -KILL -v pts/3 pts/3 root 21217 vi pts/3 root 24331 bash 

2、通过ssh远程执行命令

[root@tradx24 bin]# iip="192.168.1.10" [root@tradx24 bin]# ssh $iip w 10:54:13 up 125 days, 20:17, 1 user, load average: 0.00, 0.00, 0.00 USER TTY FROM LOGIN@ IDLE JCPU PCPU WHAT root tty1 - 21Mar14 4days 0.09s 0.09s -bash

3、通过ssh远程批量执行MySQL脚本

#ip
list1=(`cat ../tools/dblist | grep -v \# | awk '{print $1}' | sed "1,1d"`) #user list2=(`cat ../tools/dblist | grep -v \# | awk '{print $2}' | sed "1,1d"`) #password list3=(`cat ../tools/dblist | grep -v \# | awk '{print $3}' | sed "1,1d"`) for((i=0;i<=${#list1[@]};i++)); do iip=`echo ${list1[i]} | awk -F "." '{print $4}'` ssh ${list1[i]} mkdir /home/sqlScrip/ ssh ${list1[i]} mkdir /home/sqlScrip/$iip clear scp ../sqlScrip/$iip/* ${list1[i]}:/home/sqlScrip/$iip clear #path list4=(`ls ../sqlScrip/$iip`) for((w=0;w<=${#list4[@]};w++)); do if [ "117" == "$iip" ] then ssh ${list1[i]} "mysql -h ${list1[i]} -u ${list2[i]} -p${list3[i]} < /home/sqlScrip/${iip}/${list4[w]};" clear fi done ssh ${list1[i]} 'rm -rf /home/sqlScrip' done

4、通过svn下载war包

#list第五行为下载地址
list=(`cat ../tools/list  | awk '{print $5}' | sed "1,1d"`) for((i=0;i<${#list[@]};i++)); do curl -u wangyong:Abcd1234 -O ${list[i]} war=`echo ${list[i]} | awk -F "/" '{print $NF}'` mv $war ../workapp/ done

5、解压war包到指定目录

ssh ${ip} unzip ${tomcat目录}/webapps/${war包名称}.war -d  ${tomcat目录}/webapps/${指定目录}

6、多Linux服务器建立信任关系

ssh-keygen -t rsa
cd ~/.ssh scp -r id_rsa.pub $ip:/root/.ssh/$ip ssh $ip 'touch ~/.ssh/authorized_keys && chmod 644 ~/.ssh/authorized_keys' ssh $ip "cat ~/.ssh/$ip >> ~/.ssh/authorized_keys"

7、删除某目录下空文件

find ../new/$serve/properties -type f -size 0 -exec rm -f {} \;

8、删除某目录下小于10b的文件

#Delete the files smaller than 10B
        for i in `ls -l ../new/$serve/properties/ | sed -e '1d' | awk '$5 < 10 {print$NF}'` do rm -rf ../new/$serve/properties/$i done

9、Linux通过alias设置快捷命令

command(){
list1=(`cat ~/.bashrc | grep custom`) for((i=0;i<=${#list1[@]};i++)); do if [[ "${list1[i]}" = "#custom" ]] then echo "[warn] The command has already been initialized,there's no need to repeat the operation, thank you!" break else path=`pwd` #初始命令 #Initialization commands. echo "#custom" >> ~/.bashrc echo "alias l='ll -al'" >> ~/.bashrc echo "alias conf='cd `echo $path`/../conf'" >> ~/.bashrc echo "alias bin='cd `echo $path`/../bin'" >> ~/.bashrc echo "alias new='cd `echo $path`/../new'" >> ~/.bashrc echo "alias too='cd `echo $path`/../tools'" >> ~/.bashrc echo "alias hostlist='cat `echo $path`/../tools/.hostlist'" >> ~/.bashrc echo "alias un='cd `echo $path`/../'" >> ~/.bashrc echo "alias bak='cd `echo $path`/../bak'" >> ~/.bashrc echo "alias app='cd `echo $path`/../workapp'" >> ~/.bashrc echo "alias ..='cd ../'" >> ~/.bashrc source ~/.bashrc fi done }

10、引用其他shell脚本方法

## ====================================================##
## auth:wonter                                         ##
## date:2014-06-12 ## ## path:javame.cnblogs.com ## ## ====================================================## #!/bin/sh #引用tool.sh脚本中方法 . ../tools/tool.sh #Parameters par #Capture ip #Capture path config

11、获取脚本自身名称

#Automatically obtain configuration files
name=`echo $0` uname=`echo $name | awk -F "/" '{print $2}' | awk -F "." '{print $1}'` #Uniform configuration serve="$uname"

12、检查是否存在文件夹，没有则新建文件夹

bak_mk="../bak/$serve" new_mk="../new/$serve" if [ ! -d $bak_mk ]; then mkdir $bak_mk fi if [ ! -d $new_mk ]; then mkdir $new_mk fi
判断文件是否为空
if [[ -s $file ]]; then

 
      echo "not empty"
  fi 
 

13、统计脚本执行时间

　　　　 st=`date +"%Y-%m-%d %H:%M:%S"`
　　 #执行方法 start en=`date +"%Y-%m-%d %H:%M:%S"` st_c=`date -d "$st" +%s` en_c=`date -d "$en" +%s` interval=`expr $en_c - $st_c` echo "Start start-up time ：${st}" echo "Start end time ：${en}" echo "total consuming time ：${interval} 秒"

14、shell定义集合

#name
list1=(`cat ../tools/list | grep -v \# | awk '{print $1}' | sed "1,1d"`) #ip list2=(`cat ../tools/list | grep -v \# | awk '{print $2}' | sed "1,1d"`) #serve list3=(`cat ../tools/list | grep -v \# | awk '{print $3}' | sed "1,1d"`) for((i=0;i<=${#list1[@]};i++)); do cp ../conf/.model ../conf/${list1[i]}.conf cp ../bin/.model.wy ../bin/${list1[i]}.wy cp ../bin/.model.yw ../bin/${list1[i]}.yw done

15、记录脚本执行者用户与IP

#Perform operation
echo "operator:" read me a=`tty | awk -F "/dev/" '{print $2}'` date "+%Y-%m-%d %H:%M:%S" >> ../logs/operation.log echo `w | grep $a | awk '{print $3}'` "${me} > Perform operation: one" >> ../logs/operation.log

16、shell中的正则语句

for i in `cat ../conf/$confs | grep start | awk -F ">>" '{print $2}' | awk -F "_" '{print $1}'` do if [[ "${i}" == "shiro" ]] then sed -n -e '/>>shiro/,/>>shiro/p' $confs |grep -v '>>shiro' > $pro_shi cat $pro_shi | col -b > ../temp/m1 cat ../temp/m1 > $pro_shi elif [[ "${i}" == "jdbc" ]] then sed -n -e '/>>jdbc/,/>>jdbc/p' $confs |grep -v '>>jdbc' > $pro_jdbc cat $pro_jdbc | col -b > ../temp/m1 cat ../temp/m1 > $pro_jdbc fi
done

17、shell写个定时进程（不推荐我这个写法，应该有更好！）

## ====================================================##
## auth:wonter                                         ##
## date:2014-06-12 ## ## to :timing.sh ## ## ====================================================## #!/bin/sh echo "请输入定时阀值（格式：`date +"%Y-%m-%d %H:%M"` ）" read timing echo "定时任务设置完毕，请安心等待..." ti(){ while true do time=`date +"%Y-%m-%d %H:%M"` if [[ "${time}" == "${timing}" ]] then echo "定时任务:" #定时清理日志 rm -rf ../logs/* #定时备份日志 #定时执行脚本 break fi done } ti&

18、通过参数方式执行脚本 tools.sh

#!/bin/sh trust(){ #建立信任 echo "请输入信任机ip：(提示：需输入三次密码！)" read ip trusts } command(){ #初始化命令 command } case "$*" in trust) trust ;; command) command ;; *) echo "----------------------------------------" echo "pls : http://javame.cnblogs.com welcome" echo "----------------------------------------" echo " 主机信任 | or | 初始化命令(初始) " echo "tools.sh trust | or | tools.sh command" echo "----------------------------------------" ;; esac

19、终端发送回会话给其他用户 限root用户

echo "输入您想说的话吧："
read spk
echo $spk >/dev/stdin >/dev/pts/2

20、某目录下所有文件统一批量修改ip

sed -i  "s/10.0.0.1/10.0.1.2/g" `grep "10.0.0.1" -rl /opt/uer/wy`

21、链接数与进程数

#链接数
netstat -n | awk '/^tcp/ {++y[$NF]} END {for(w in y) print w, y[w]}' #统计httpd协议连接数进程数 ps -ef|grep httpd|wc -l ps aux|grep httpd|wc -l #句柄数 lsof -n|awk '{print $2}'|sort|uniq -c|sort -nr|more #查看进程占用内存 ps aux |awk '($1 ~apache) && ($6>50) {print $0}'

22、Linux查看线程的三种方法

1、top -H 手册中说：-H : Threads toggle 加上这个选项启动top，top一行显示一个线程。否则，它一行显示一个进程。 2、ps xH 手册中说：H Show threads as if they were processes 这样可以查看所有存在的线程。 3、ps -mp <PID> 手册中说：m Show threads after processes 这样可以查看一个进程起的线程数。

23、查看连接某服务端口最多的的IP地址

netstat -nat | grep "192.168.1.20:8443" |awk '{print $5}'|awk -F: '{print $4}'|sort|uniq -c|sort -nr|head -20

24、常见压缩解压命名

.tar 
解包：tar xvf FileName.tar
打包：tar cvf FileName.tar DirName
（注：tar是打包，不是压缩！）

.gz
解压1：gunzip FileName.gz
解压2：gzip -d FileName.gz 压缩：gzip FileName .tar.gz 和 .tgz 解压：tar zxvf FileName.tar.gz 压缩：tar zcvf FileName.tar.gz DirName .bz2 解压1：bzip2 -d FileName.bz2 解压2：bunzip2 FileName.bz2 压缩： bzip2 -z FileName .tar.bz2 解压：tar jxvf FileName.tar.bz2 压缩：tar jcvf FileName.tar.bz2 DirName .bz 解压1：bzip2 -d FileName.bz 解压2：bunzip2 FileName.bz 压缩：未知 .tar.bz 解压：tar jxvf FileName.tar.bz 压缩：未知 .Z 解压：uncompress FileName.Z 压缩：compress FileName .tar.Z 解压：tar Zxvf FileName.tar.Z 压缩：tar Zcvf FileName.tar.Z DirName .zip 解压：unzip FileName.zip 压缩：zip FileName.zip DirName .rar 解压：rar x FileName.rar 压缩：rar a FileName.rar DirName 

25、厚积薄发，持续更新积累，请关注javame.cnblogs.com

1.gzexe -d 解密
2.Address 192.168.3.202 maps to bogon, but this does not map back to the address - POSSIBLE BREAK-IN ATTEMPT!
解决方法:vim /etc/ssh/ssh_config 修改GSSAPIAuthentication 值为 no
3.打印指定行一下

sed -n -i '/PID/,[phone] p' file

4.sed用法

在第一行插入数据
sed -i 1"i\\$icare_ip" file 只打印第三行 sed -n '3p' datafile 只查看文件的第100行到第200行 sed -n '100,200p' file 删除第二到第五行 sed '2,5d' datafile 删除包含"2014-10-19"的行到包含"2014-10-29"的行之间的行 sed '/2014-10-19/,/2014-10-29/d' datafile 删除包含"My"的行到第十行的内容 sed '/My/,10d' datafile
sed选项-e用于进行多重编辑
sed -e '1,10d' -e 's/My/Your/g' datafile

5.交互式输入

{
echo "who" } | ssh 192.168.48.73

6.shell中的集合

list1=(`cat ../tools/list | grep -v \# | awk '{print $1}' | sed "1,1d"`) for((i=0;i<${#list1[@]};i++)); do sh ./${list1[i]}.wy done

7.判断是否存在

if [ ! -d $bak_mk ]; then mkdir $bak_mk fi

8.针对^M

dos2unix

9.获取最后登录系统的ip

last -n 5

10.AWK统计某个文件夹下的文件占用的字节数

ls -l |awk 'BEGIN {size=0;} {size=size+$5;} END{print "[end]size is ", size}' [end]size is 8657198 ls -l |awk 'BEGIN {size=0;} {size=size+$5;} END{print "[end]size is ", size/1024/1024,"M"}' [end]size is 8.25889 M

关于find搜索定位：

11.文件名 搜索文件

locate one.sh 

12.查找后执行

find ./ -name 192.168.48.154 -exec cat > 1 {} \;

13.删除空文件

find ./ -type f -size 0 -exec rm -rf {} \;

14.查找大小为0的文件或空目录

find ./ -empty -type f / d 

15.查大于512k的文件

find /home -size +512k 

16.将多个文件打印到一个文件中

find ./ -name "[1-9].sh" -exec cat > 3 {} \;

17.目录下过滤文件夹

find ./ ! -type f 

18.批量修改

find ./ -name "[1-9].sh" -exec sed -i s/0/9/g {} \;

19.-o 相当于且

find ./ -name "1.sh" -o -name "2.sh"

20.两天内改动

find /home -mtime -2 

21.两分钟内改动

find /home -mmin -2

22.10分钟内访问的文件

find /home -amin -10

23.2小时内访问的文件

find /home -atime -2

24.将find出来的东西拷到另一个地方

find *.c -exec cp '{}' /tmp ';'

 25.检查/root目录挂载在那个磁盘分区上

df -h /root

26.软连接、硬链接

ln -s /home /root/home
ln -b /home/run.sh /root/run.sh

27.解压到指定目录

tar zxvf /filename.tar.zip -C /home

28.vi文书 

gg第一行G最后一行
d1G删除光标所在行到第一行
dG删除光标所在行到最后一行
yy复制光标所在一行
A在光标所在最后字符处开始插入
ZZ保存退出

29.^M 乱码

yum install dos2unix

30.修改linux登录后信息

vi /etc/motd

31.定时任务脚本

cmd="cd /root/polling/bin/ && /root/polling/bin/run.sh" echo -n "* " >> /var/spool/cron/root echo -n "6 " >> /var/spool/cron/root echo -n "* " >> /var/spool/cron/root echo -n "* " >> /var/spool/cron/root echo -n "* " >> /var/spool/cron/root echo $cmd >> /var/spool/cron/root

32.组网信任

{
echo -e "\n" } | ssh-keygen -t rsa -P '' cp -r ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys cd ~/.ssh scp -r id_rsa.pub $ip:/root/.ssh/$ip ssh $ip 'touch ~/.ssh/authorized_keys && chmod 644 ~/.ssh/authorized_keys' ssh $ip "cat ~/.ssh/$ip >> ~/.ssh/authorized_keys"

33.关于shell入参处理

$0 脚本名字 
$1 位置参数 #1 $2 - $9 位置参数 #2 - #9 ${10} 位置参数 #10 $# 位置参数的个数 "$*" 所有的位置参数(作为单个字符串) * "$@" 所有的位置参数(每个都作为独立的字符串) ${#*} 传递到脚本中的命令行参数的个数 ${#@} 传递到脚本中的命令行参数的个数 $? 返回值 $$ 脚本的进程ID(PID) $- 传递到脚本中的标志(使用set) $_ 之前命令的最后一个参数 $! 运行在后台的最后一个作业的进程ID(PID)

34.使用cut切分

echo 1:2:3 | cut -d ':' -f 2 echo 1:2:3 | awk -F ':' {'print $2'}

 35.egrep扩展

cat 1.sh | grep -v 5 | grep -v 8 cat 1.sh | egrep -v '5|8' ls | egrep 'lsit1.sh|tools.sh' #可以同时查找多个 egrep "go?d" tools.sh #？一个字符 * 多个字符

36.read命令带描述

read -p "uname:" name

37.test命令

#判断是否存在目录/文件
test -e /home && echo ok || echo no [ "a" == "ad" ] && echo yes || echo no #判断参数是否相等 test $a -eq $b && echo yes || echo no test $a != $b && echo yes || echo no -eq 相等 -ne 不相等 test "d" = "d" -o "a" = "d" && echo yes || echo no -o 并 -a 且

38.进程树

ps -axjf