Linux按行讀取檔案

2021-09-30 15:23:36 字數 3556 閱讀 6412

#!/bin/bash

n=1while ((n<=$(cat readline|wc -l)))

doarray=$(cat readline| sed -n "$ p"|awk '')

echo $array

array2=$(cat readline| sed -n "$ p"|awk '')

echo $array2

((n+=1))

done

#按行讀取檔案

#定義變數接受檔名稱

file=""

#判斷檔案是否存在

if [ "$1" == "" ]; then

file="/dev/stdin"

else

file="$1"

#判斷檔案是否可讀

if [ ! -f $file ]; then

echo "$file : does not exists"

exit 1

elif [ ! -r $file ]; then

echo "$file: can not read"

exit 2

fifi

#按行讀取檔案並將值賦給變數

cat $file | while read line

dores=`cat icv_access_log.2012-09-03.txt |grep $line |awk ''|sort|uniq -c |sort -nr|head -1`

wd=$" "$

echo $wd >>result.txt

echo $wd

done

你要把每行取出來分別賦給乙個變數的話,用sed 或 head 即可。

a=`sed -n '1p' ./data/1/statusl.txt`

b=`sed -n '2p' ./data/1/statusl.txt`

或者a=`head -n 1 ./data/1/statusl.txt`

b=`head -n 2 ./data/1/statusl.txt`

參考了下

在linux中有很多方法逐行讀取乙個檔案的方法,其中最常用的就是下面的指令碼裡的方法,而且是效率最高,使用最多的方法。為了給大家乙個直觀的感受,我們將通過生成乙個大的檔案的方式來檢驗各種方法的執行效率。

方法1:while迴圈中執行效率最高,最常用的方法。

function while_read_line_bottm()

注釋:我習慣把這種方式叫做read釜底抽薪,因為這種方式在結束的時候需要執行檔案,就好像是執行完的時候再把檔案讀進去一樣。

方法2 : 重定向法;管道法: cat $filename | while read line

function while_read_line()

注釋:我只所有把這種方式叫做管道法,相比大家應該可以看出來了吧。當遇見管道的時候管道左邊的命令的輸出會作為管道右邊命令的輸入然後被輸入出來。

方法3: 檔案描述符法

function while_read_line_fd()

注釋: 這種方法分2步驟,第一,通過將所有內容重定向到檔案描述符3來關閉檔案描述符0.為此我們用了語法exec 3<&0 。第二部將輸入檔案放送到檔案描述符0,即標準輸入。

方法4 for 迴圈。

function for_in_file()

注釋:這種方式是通過for迴圈的方式來讀取檔案的內容相比大家很熟悉了,這裡不多說。

對各個方法進行測試,看那方法的執行效率最高。

首先我們用指令碼(指令碼見附件)生成乙個70000行的檔案,檔案位置在/scripts/bigfile。然後通過下面的指令碼來測試各個方法的執行效率,指令碼很簡單,不再解釋。

#!/bin/bash

filename="$1"

timefile="/tmp/loopfile.out" > $timefile

script=$(basename $0)

function usage()

function while_read_bottm()

function while_read_line()

function while_read_line_fd()

function for_in_file()

if [ $# -lt 1 ] ; then

usage

fiecho -e " \n starting file processing of each method\n"

echo -e "method 1:"

echo -e "function while_read_bottm"

time while_read_bottm >> $timefile

echo -e "\n"

echo -e "method 2:"

echo -e "function while_read_line "

time while_read_line >> $timefile

echo -e "\n"

echo -e "method 3:"

echo "function while_read_line_fd"

time while_read_line_fd >>$timefile

echo -e "\n"

echo -e "method 4:"

echo -e "function for_in_file"

time for_in_file >> $timefile

執行指令碼後: [root@localhost shell]# ./while /scripts/bigfile

指令碼輸出內容:

method 1:

function while_read_bottm

real 0m5.689s

user 0m3.399s

sys 0m1.588s

method 2:

function while_read_line

real 0m11.612s

user 0m4.031s

sys 0m4.956s

method 3:

function while_read_line_fd

real 0m5.853s

user 0m3.536s

sys 0m1.469s

method 4:

function for_in_file

real 0m5.153s

user 0m3.335s

sys 0m1.593s

下面我們對各個方法按照速度進行排序。

real 0m5.153s method 4 (for 迴圈法)

real 0m5.689s method 1 (while 釜底抽薪法)

real 0m5.853s method 3 (識別符號法)

real 0m11.612s method 2 (管道法)

由此可見在各個方法中,for語句效率最高,而在while迴圈中讀寫檔案時,

while read line

doecho $line

done < $filename

方式執行效率最高。面的內容:

按行讀取檔案

const string strurlfilename testurl.txt ifstream fin strurlfilename.c str fstream binary if fin fin.eof string serverurl getline fin,serverurl info lo...

c讀取按行讀取檔案

c中沒有getline 這個函式,該函式只存在於c 中。有些人說用gets,但是這個函式是不安全的,gets不知道字串的大小,容易造成溢位的問題。解決方案,使用fgets函式 其關鍵在於在讀出n 1個字元之前,如遇到了換行符或eof,則讀出結束。因此,通過設定適當大小的緩衝區,即可實現讀取一行的功能...

C 讀取檔案 按行讀取

zz c 如何讀取檔案前面說過了 下面以乙個例子來說明如何按行讀取,其實很簡單,就是使用filestream的readline 方法。例如有這樣乙個檔案test.txt,讀取出來顯示在乙個richtextbox中,檔案內容如下 html view plain copy print?諾基亞 n8 摩托...