在hadoop當中，map任務的個數等於split（分片）的個數，乙個split對應乙個map。
當檔案小於split的大小時，乙個檔案對應乙個split；
當檔案大小超過split時，該檔案將被切分成多個split，檔案大小除以split得到split個數。
max（minimumsize, min(maximumsize, blocksize)）minimumsize < blocksize < maximumsize
其中minimumsize預設為1，maximumsize預設為long.max_value(長整型的最大數)。
至於如何通過配置檔案來設定split的可以去參考一下其他部落格，這裡主要講一下如何通過**設定split大小。
configuration conf = new
configuration();
conf.setlong("mapred.min.split.size", 10485760);//按位元組大小
conf.setlong("mapred.max.split.size", 10485760);
max（minimumsize, min(maximumsize, blocksize)）來判斷split的大小。 map和reduce 個數的設定
一 控制hive任務中的map數 1.通常情況下，作業會通過input的目錄產生乙個或者多個map任務。主要的決定因素有 input的檔案總個數，input的檔案大小，集群設定的檔案塊大小 目前為128m,可在hive中通過set dfs.block.size 命令檢視到，該引數不能自定義修改 2....
Hive 設定map 和 reduce 的個數
一 控制hive任務中的map數 1.通常情況下，作業會通過input的目錄產生乙個或者多個map任務。主要的決定因素有 input的檔案總個數，input的檔案大小，集群設定的檔案塊大小 目前為128m,可在hive中通過set dfs.block.size 命令檢視到，該引數不能自定義修改 2....
Hive 設定map 和 reduce 的個數
一 控制hive任務中的map數 1.通常情況下，作業會通過input的目錄產生乙個或者多個map任務。主要的決定因素有 input的檔案總個數，input的檔案大小，集群設定的檔案塊大小 目前為128m,可在hive中通過set dfs.block.size 命令檢視到，該引數不能自定義修改 2....