shell字符串處理總結

1. 字符串切片

1.1 基於偏移量取字符串

返回字符串變量 string 的字符的長度 ${#string} ，一個漢字算一個字符

示例

[root@centos8 script]#str=" I Love Python "
[root@centos8 script]#echo ${#str}
15
[root@centos8 script]#

返回字符串變量var中從第offset個字符后(不包括第offset個字符)的字符開始，到最后的部分， offset的取值在0 到 ${#var}-1 之間(bash4.2后，允許為負值)
${var:offset}

[root@centos8 script]#str="I Love Python"
[root@centos8 script]#echo ${str:2}        # 從第2個字符開始取，默認取后面字符的全部，第2個字符不包含在內
Love Python
[root@centos8 script]#

返回字符串變量var中從第offset個字符后(不包括第offset個字符)的字符開始，長度為number的部分 ${var:offset:number}

[root@centos8 script]#str="I Love Shell"
[root@centos8 script]#echo ${str:2:4}   # 從第2個字符開始取，取4個字符
Love
[root@centos8 script]#

示例

[root@centos8 script]#str="I am CEO I am CTO"
[root@centos8 script]#echo ${str:0:$((${#str}-8))}
I am CEO
[root@centos8 script]#

示例：年月日

[root@centos8 script]#today=$(date +"%Y%m%d")
[root@centos8 script]#echo $today
20210408
[root@centos8 script]#Y_m_d=${today:0:4}"-"${today:4:2}"-"${today:6:2}
[root@centos8 script]#echo $Y_m_d
2021-04-08
[root@centos8 script]#month=${today:0:6}
[root@centos8 script]#echo $month
202104
[root@centos8 script]#

取字符串的最右側幾個字符,取字符串的最右側幾個字符, 注意:冒號后必須有一空白字符 ${var: -length}

[root@centos8 script]#str="I Love Shell"
[root@centos8 script]#echo ${str:-3}
I Love Shell
[root@centos8 script]#echo ${str: -3}
ell
[root@centos8 script]#

從最左側跳過offset字符，一直向右取到距離最右側lengh個字符之前的內容,即:掐頭去尾 ${var:offset:-length}

[root@centos8 script]#str="I Love Shell"
[root@centos8 script]#echo ${str:2:-3}
Love Sh
[root@centos8 script]#

先從最右側向左取到length個字符開始，再向右取到距離最右側offset個字符之間的內容,注意:- length前空格
${var: -length:-offset}

[root@centos8 script]#str="I Love Shell"
[root@centos8 script]#echo ${str: -2:-3}
-bash: -3: substring expression < 0
[root@centos8 script]#echo ${str: -3:-2}
e
[root@centos8 script]#echo ${str:-3:-2}
I Love Shell
[root@centos8 script]#echo ${str: -3:-2}
e
[root@centos8 script]#echo ${str: -5:-2}
She
[root@centos8 script]#

1.2 基於模式取子串

# 其中word可以是指定的任意字符,自左而右，查找var變量所存儲的字符串中，第一次出現的word, 刪除字符串開頭至第一次出現word字符串(含)之間的所有字符
${var#*word}


# 同上，貪婪模式，不同的是，刪除的是字符串開頭至最后一次由word指定的字符之間的所有內容
${var##*word}

示例

[root@centos8 script]#file="var/log/messages"
[root@centos8 script]#echo ${file#*/}
log/messages
[root@centos8 script]#echo ${file##*/}
messages
[root@centos8 script]#

示例

[root@centos8 ~]#url="https://www.baidu.com/index.html"
[root@centos8 ~]#echo ${url#*//}
www.baidu.com/index.html
[root@centos8 ~]#echo ${url##*/}
index.html
[root@centos8 ~]#echo $url
https://www.baidu.com/index.html
[root@centos8 ~]#

# 其中word可以是指定的任意字符,功能:自右而左，查找var變量所存儲的字符串中，第一次出現的word, 刪除字符串最后一個字符向左至第一次出現word字符串(含)之間的所有字符
${var%word*}

#  同上，只不過刪除字符串最右側的字符向左至最后一次出現word字符之間的所有字符 
${var%%word*}

示例

[root@centos8 script]#file="var/log/messages"
[root@centos8 script]#echo ${file%/*}
var/log
[root@centos8 script]#echo ${file%%/*}
var
[root@centos8 script]#

示例

[root@centos8 ~]#url="https://www.baidu.com:8080/index.html"
[root@centos8 ~]#echo ${url%:*}
https://www.baidu.com
[root@centos8 ~]#echo ${url%%:*}
https
[root@centos8 ~]#

2. 查找替換

查找 string 所表示的字符串中，使用 replace 替換第一次被 substring 所匹配到的字符串

${string/substring/replace}     

示例

[root@centos8 script]#str="I LOVE Shell,I LOVE Python"
[root@centos8 script]#echo ${str/LOVE/like}
I like Shell,I LOVE Python
[root@centos8 script]#

查找 string 所表示的字符串中，使用 replace 替換，所有能被 substring 所匹配到的字符串

${string//substring/replace}

示例

[root@centos8 script]#str="I LOVE Shell,I LOVE Python"
[root@centos8 script]#echo ${str//LOVE/like}
I like Shell,I like Python
[root@centos8 script]#

查找 string 所表示的字符串中,以 replace 替換,行首被 substring 所匹配到的字符串，

${string/#substring/replace}   

示例

[root@centos8 script]#str="I Love Go I Love Go"
[root@centos8 script]#echo ${str/#Go/Python}
I Love Go I Love Go
[root@centos8 script]#

查找 string 所表示的字符串中,以 replace 替換,行尾被 substring 所匹配到的字符串，

${string/%substring/replace}    

示例

[root@centos8 script]#str="I Love Go I Love Go"
[root@centos8 script]#echo ${str/%Go/Python}
I Love Go I Love Python
[root@centos8 script]#

示例

touch {a..d}.html
for file in `ls *.html`
do
     mv $file ${file/%html/HTML}
done

${value:-word} 當變量未定義或者值為空時，返回值為word內容，否則返回變量的值

result=${test:-UNSET}
echo $result
echo $test

示例：防止變量無值

# path="/var/log"
find ${path:-/tmp} -type f -name "*.tar.gz" -exec rm -f {} \;  
# 當/var/log目錄不存在時，刪除/tmp目錄下的內容，主要是防止/var/log目錄不存在時會將root或者根刪除

${value:=word} 若變量未定義或者值為空時，在返回word的值的同時，將word賦給value
注：變量替換的值也可以是``括起來的命令:$USERDIR={$Mydir:-pwd}

[root@centos8 script]#test="xufengnian"
[root@centos8 script]#result=${test:=UNSET}
[root@centos8 script]#echo $result
xufengnian
[root@centos8 script]#echo $test
xufengnian
[root@centos8 script]#

${value:?word}

[root@centos8 script]#test="xufengnian"
[root@centos8 script]#result=${test:?UNSET}
[root@centos8 script]#echo $result
xufengnian
[root@centos8 script]#echo $test
xufengnian
[root@centos8 script]#

${value:+word}

[root@centos8 script]#test="xufengnian"
[root@centos8 script]#result=${test:+UNSET}
[root@centos8 script]#echo $result
UNSET
[root@centos8 script]#echo $test
xufengnian
[root@centos8 script]#

3. 查找並刪除

# 從變量$string開頭開始刪除最短匹配$substring子串
${string#substring}            

[root@centos8 script]#str="I am xufengnian I am"
[root@centos8 script]#echo ${str#I am}
xufengnian I am
[root@centos8 script]#

# 從變量$string開頭開始刪除最長匹配$substring子串
${string##substring}    

[root@centos8 script]#str="I am xufengnian I am"
[root@centos8 script]#echo ${str##I am}
xufengnian I am
[root@centos8 script]#

# 從變量$string結尾開始刪除最短匹配$substring子串
${string%substring}            

[root@centos8 script]#str="I am xufengian I am"
[root@centos8 script]#echo ${str%I am}
I am xufengian
[root@centos8 script]#

# 從變量$string結尾開始刪除最長匹配$substring子串
${string%%substring}           

[root@centos8 script]#str="I am xufengnian I am"
[root@centos8 script]#echo ${str%%I am}
I am xufengnian
[root@centos8 script]#

# 刪除var表示的字符串中第一次被pattern匹配到的字符串 
${var/pattern}

[root@centos8 script]#str="I am xufengnian I am"
[root@centos8 script]#echo ${str/I am}
xufengnian I am
[root@centos8 script]#

# 刪除var表示的字符串中所有被pattern匹配到的字符串 
${var//pattern}

[root@centos8 script]#str="I am xufengnian I am"
[root@centos8 script]#echo ${str//I am}
xufengnian
[root@centos8 script]#

示例：把下面所有系統中文件的文件名的finished內容去掉

touch 1_finished.jpg 2_finished.jpg 3_finished.jpg 4_finished.jpg 5_finished.jpg

# 方法一：
for file in `ls *.jpg`
do
mv $file ${file%finished*}.jpg
done

# 方法二：
ls *.jpg|awk -F "finished" '{print "mv " $0,$1""$2}'|bash

# 方法三：
rename "finished" "" *.jpg

4. 字符大小寫轉換

把 string 中的所有小寫字母轉換為大寫

${string^^}

示例

[root@centos8 ~]#str="i love python"
[root@centos8 ~]#echo ${str^^}
I LOVE PYTHON
[root@centos8 ~]#

把 string 中的所有大寫字母轉換為小寫

${string,,}

示例

[root@centos8 ~]#str="WELCOME TO BEIJING"
[root@centos8 ~]#echo ${str,,}
welcome to beijing
[root@centos8 ~]#