shell 處理文字工具集合(常用命令)

2021-07-10 23:58:46 字數 2242 閱讀 7221

提供的例子和引數都是最常用和最為實用的;

我對shell指令碼使用的原則是命令單行書寫,盡量不要超過2行;

如果有更為複雜的任務需求,還是考慮python吧;

預設使用'\n'作為檔案的定界符;

-print0 使用'\0'作為檔案的定界符,這樣就可以搜尋包含空格的檔案;

grep match_patten file // 預設訪問匹配行

xargs 能夠將輸入資料轉化為特定命令的命令列引數;這樣,可以配合很多命令來組合使用。比如grep,比如find;

-d 定義定界符 (預設為空格 多行的定界符為 \n)

-n 指定輸出為多行

-i {} 指定替換字串,這個字串在xargs擴充套件時會被替換掉,用於待執行的命令需要多個引數時

eg:

cat file.txt | xargs -i {} ./command.sh -p {} -1
-0:指定\0為輸入定界符

eg:統計程式行數

find source_dir/ -type f -name "*.cpp" -print0 |xargs -0 wc -l
字段說明:

-n 按數字進行排序 vs -d 按字典序進行排序

-r 逆序排序

-k n 指定按第n列排序

eg:

sort -nrk 1 data.txt

sort -bd data // 忽略像空格之類的前導空白字元

將兩個文字按列拼接到一起;

cat file112

cat file2

colin

book

paste file1 file2

1 colin

2 book

預設的定界符是製表符,可以用-d指明定界符

paste file1 file2 -d ","

1,colin

2,book

wc -l file // 統計行數

wc -w file // 統計單詞數

wc -c file // 統計字元數

nr:表示記錄數量,在執行過程中對應當前行號;

nf:表示字段數量,在執行過程總對應當前行的字段數;

$0:這個變數包含執行過程中當前行的文字內容;

$1:第乙個欄位的文字內容;

$2:第二個欄位的文字內容;

echo -e "line1 f2 f3\n line2 \n line 3" | awk ''
var=1000

echo | awk '' vara=$var # 輸入來自stdin

awk '' vara=$var file # 輸入來自檔案

awk 'nr < 5' #行號小於5

awk 'nr==1,nr==4 ' file #行號等於1和4的列印出來

awk '/linux/' #包含linux文字的行(可以用正規表示式來指定,超級強大)

awk '!/linux/' #不包含linux文字的行

使用-f來設定定界符(預設為空格)

awk -f: '' /etc/passwd

使用getline,將外部shell命令的輸出讀入到變數cmdout中;

echo | awk ''
for(i=0;i<10;i++)

for(i in array)

eg:

以逆序的形式列印行:(tac命令的實現)

seq 9| \

awk ' \

end} '

index(string,search_string):返回search_string在string中出現的位置

sub(regex,replacement_str,string):將正則匹配到的第一處內容替換為replacement_str;

match(regex,string):檢查正規表示式是否能夠匹配字串;

length(string):返回字串長度

echo | awk ''
printf 類似c語言中的printf,對輸出進行格式化

eg:

seq 10 | awk ''
for word in $line;

do echo $word;

done

$:從字串中提取乙個字元;(bash文字切片)

$:返回變數word的長度

for((i=0;i<$;i++))

doecho ${word:i:1);

done

常用的shell處理txt文字命令集合

以下是部分的shell命令集合希望能對大家有所幫助 ls r home jiaotong404 lh data hk data jpegimages jpg file.txt 將資料夾下的jpg檔名都輸出到file.txt find dir name jpg train.txt 將dir資料夾下jp...

shell處理文字

1 grep 同時滿足多個關鍵字和滿足任意關鍵字 grep e word1 word2 word3 file.txt 滿足任意條件 word1 word2和word3之一 將匹配。grep word1 file.txt grep word2 grep word3 必須同時滿足三個條件 word1 w...

自學筆記 shell(文字處理工具)

1.sort的 t選項使空白有意義,且被指定的字元會分隔字段。2.k2.5,5.6指的是從第二個欄位的第四個字元開始比較,一直到第五個欄位的第六個字元。3.sort uniq 常用語管道中刪除已使用sort排序完成的重覆記錄。uniq的三個選項 c在輸出行前加上該行重複次數 d僅顯示重複的行 u僅顯...