多個檔案多資料批量讀取

2021-10-24 14:40:20 字數 1148 閱讀 6999

資料情況如下:

1.兩個資料夾:

2.每個資料夾內若干個資料

# 載入資料路徑

x_path = r'***x\bp_input_ai_data\\'

y_path = r'***x\bp_input_y_data\\'

defread

(x_path,y_path)

: x_files = os.listdir(x_path)

y_files = os.listdir(y_path)

file_num =

len(x_files)

# 資料夾下檔案個數

print

('*****== 共計%s個資料 *****='

% file_num)

x_files.sort(key=

lambda x:

int(x[:-

4]))

#倒著數第四位'.'為分界線,按照『.』左邊的數字從小到大排序 1.txt 2.txt

y_files.sort(key=

lambda y:

int(y[:-

4]))

# 讀取資料夾中每個資料

for i in

range

(file_num)

:# 這裡迴圈 讀每個檔案下的所有資料

x_name = x_path +

'\\'

+ x_files[i]

y_name = y_path +

'\\'

+ y_files[i]

# print('*****= %s讀取資料... *****=' % x_files[i])

x_data = np.loadtxt(x_name)

# 讀取資料

y_data = np.loadtxt(y_name)

批量讀取 R 批量讀取檔案

檔案讀取 1 同一目錄下,多個同一型別,檔名連續的檔案資料讀取 設定工作目錄 setwd d r project 設定乙個空白的資料框 data 我的檔案是 001.csv 002.csv 003.csv 思維方式是用乙個id的向量,從1數到100,然後和 csv 拼接起來,組成檔名,函式可以用pa...

spark textFile讀取多個檔案

1.1 簡單讀取檔案 val spark sparksession.builder demo master local 3 getorcreate 讀取hdfs檔案目錄 spark.sparkcontext.textfile user data spark.sparkcontext.textfile...

matlab 批量讀取資料檔案 mat dat

檔名如d00.dat,d01.dat,d21.dat filepath g traindata 資料夾的路徑 for i 1 3 n是要讀入的檔案的個數 load filepath d0 num2str i dat end迴圈讀取和繪製圖形 filepath g traindata 資料夾的路徑 f...