Shell 正則表達(dá)式及綜合案例及文本處理工具詳解

更新時(shí)間：2023年11月17日 10:11:05 作者：會(huì)洗碗的CV工程師

這篇文章主要介紹了Shell 正則表達(dá)式及綜合案例及文本處理工具的相關(guān)知識(shí),本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友參考下吧

1. 搜索passwd文件以root關(guān)鍵字開(kāi)頭的所有行，并輸出該行的第7列
2. 搜索passwd文件以root關(guān)鍵字開(kāi)頭的所有行，并輸入該行的第1列和第7列，中間以","分割
3. 只顯示/etc/passwd 的第一列和第七列,以逗號(hào)分割，且在所有行前面添加列名"start"在最后一行添加"over"

內(nèi)置變量

1. 統(tǒng)計(jì)passwd文件名，每行的行號(hào)，每列的列數(shù)
2. 查詢ifconfig命令輸出結(jié)果中的空行所在行號(hào)

一、常規(guī)匹配

一串不包含特殊字符的正則表達(dá)式匹配它自己

例子，比如說(shuō)想要查看密碼包含root字符串的，可以這樣寫(xiě)

cat /etc/passwd | grep root

二、常用特殊字符

特殊字符	作用
^	匹配一行的開(kāi)頭
$	匹配一行的結(jié)束
.	匹配任意一個(gè)字符
*	*不單獨(dú)使用，他和上一個(gè)字符連用，表示匹配上一個(gè)字符0次或者多次
[]	[]表示匹配某個(gè)范圍內(nèi)的一個(gè)字符
\	表示轉(zhuǎn)義字符，一般和特殊字符連用表示特殊字符本身

例1：匹配以a字符開(kāi)頭的：

cat /etc/passwd | grep ^a

例子2：匹配以e字符結(jié)尾

cat /etc/passwd | grep e$

例子3：匹配任一個(gè)字符

cat /ect/passwd | grep r.t

cat /ect/passwd | grep r..t

例子4：查詢包含以字符r開(kāi)頭，t結(jié)尾的字符串

cat /etc/passwd | grep r.*t

[6,8] ------匹配6或者8
[0-9] ------匹配一個(gè)0-9 的數(shù)字
[0-9]* ------匹配任意長(zhǎng)度的數(shù)字字符串
[a-z] ------匹配一個(gè) a-z 之間的字符
[a-z]* -----匹配任意長(zhǎng)度的字母字符串
[a-c,e-f] ---匹配 a-c 或者 e-f之間的任意字符

用法例子看下圖吧：

例子6：假如說(shuō)我們想查找n_test.sh文件包含$符的那這就需要用到轉(zhuǎn)義字符

cat /scripts/n_test.sh | grep '\$'

三、匹配手機(jī)號(hào)

我們都知道手機(jī)號(hào)是由第一位數(shù)字是1，第二位是3，4，5，7，8，9；其余數(shù)字隨便。總共十一位數(shù)字，因此我們可以得出

"1569656955" | grep ^1[3,4,5,7,8,9][0-9][0-9][0-9][0-9][0-9][0-9][0-9][0-9]$

看上圖可以得知，第一個(gè)數(shù)字符合手機(jī)號(hào)形式，而第二個(gè)明顯不符合。但是這樣【0-9】太多了，比較繁瑣，我們就可以在后面用一個(gè)大括號(hào)表示出現(xiàn)次數(shù)來(lái)代替重復(fù)的0-9；但是要在正則表達(dá)式之前加入-E選項(xiàng)，如下：

grep -E ^1[3,4,5,7,8,9][0-9]{9}$

大于小于11位數(shù)字都是不符合的

四、案例之歸檔文件

實(shí)際生產(chǎn)應(yīng)用中，往往需要對(duì)重要的數(shù)據(jù)進(jìn)行歸檔備份

需求：實(shí)現(xiàn)一個(gè)目錄歸檔備份的腳本，輸入一個(gè)目錄名稱，將目錄下所有文件按天歸檔保存，并將歸檔日期附加在文檔文件名上，放在根目錄下(/archive)
這里用到的歸檔命令： tar

后面可以加上 -c 選項(xiàng)表示歸檔，加上 -z 選項(xiàng)表示同時(shí)進(jìn)行壓縮得到的文件后綴名為 .tar.gz；不過(guò)要注意的是可能還是需要加上P選項(xiàng)代表允許我們使用絕對(duì)路徑進(jìn)行歸檔。

#!/bin/bash
# 首先判斷輸入的參數(shù)個(gè)數(shù)是否為1
if [ $# -ne 1 ]
then
    echo "參數(shù)個(gè)數(shù)錯(cuò)誤！應(yīng)該輸入一個(gè)參數(shù)作為歸檔目錄名"
    exit
fi
# 從參數(shù)中獲取目錄名稱，查看目錄名稱是否存在
if [ -d $1 ]
then
    echo
else
    echo
    echo "目錄不存在！"
    echo
    exit
fi
# 獲取絕對(duì)路徑
DIR_NAME=$(basename $1)
DIR_PATH=$(cd $(dirname $1);pwd)
# 獲取當(dāng)前日期，歸檔文件名拼接成日期
DATE=$(date +%y%m%d)
# 訂閱生成歸檔文件名稱
FILE=archive_${DIR_NAME}_$DATE.tar.gz
# 訂閱生成歸檔文件的路徑
DEST=/archive/$FILE
# 開(kāi)始?xì)w檔目錄文件
echo "開(kāi)始?xì)w檔...."
echo
# -c 歸檔 z 壓縮 f可視化
tar -czPf $DEST $DIR_PATH/$DIR_NAME
# 判斷上面文件歸檔文件操作是否成功
if [ $? -eq 0 ]
then
    echo
    echo "歸檔成功"
    echo "歸檔的文件為：$DEST"
    echo
else
    echo "歸檔出現(xiàn)問(wèn)題"
    echo
fi
exit