cdh 與原生態Hadoop區別

2021-08-02 10:03:18 字數 1219 閱讀 7577

需要認識的幾個問題

—————————————————————————————————————————

1.hadoop有幾個版本?

2.cdh有幾種安裝方式?

3.cdh在安裝認證方面做了什麼改變?

—————————————————————————————————————————-

cloudera的cdh和apache的hadoop的區別  目前而言,不收費的hadoop版本主要有三個(均是國外廠商),分別是:apache(最原始的版本,所有發行版均基於這個版本進行改進)、cloudera版本(cloudera』s distribution including apache hadoop,簡稱cdh)、hortonworks版本(hortonworks data platform,簡稱「hdp」),對於國內而言,絕大多數選擇cdh版本,cdh和apache版本主要區別如下:  

(1) cdh對hadoop版本的劃分非常清晰,只有兩個系列的版本,分別是cdh3和cdh4,分別對應第一代hadoop(hadoop 1.0)和第二代hadoop(hadoop 2.0),相比而言,apache版本則混亂得多;比apache hadoop在相容性,安全性,穩定性上有增強。  

(2)cdh3版本是基於apache  hadoop  0.20.2改進的,並融入了最新的patch,cdh4版本是基於apache hadoop 2.x改進的,cdh總

是並應用了最新bug修復或者feature的patch,並比apache hadoop同功能版本提早發布,更新速度比apache官方快。

(3)安全 cdh支援kerberos安全認證,apache hadoop則使用簡陋的使用者名稱匹配認證 

(4)cdh文件清晰,很多採用apache版本的使用者都會閱讀cdh提供的文件,包括安裝文件、公升級文件等。 

(5)cdh支援yum/apt包,tar包,rpm包,cm安裝,cloudera manager三種方式安裝,apache hadoop只支援tar包安裝。

1、聯網安裝、公升級,非常方便 

3、hadoop生態系統包自動匹配,不需要你尋找與當前hadoop匹配的hbase,flume,hive等軟體,yum/apt會根據當前安裝hadoop版本自動尋找匹配版本的軟體包,並保證相容性。

4、自動建立相關目錄並軟鏈到合適的地方(如conf和logs等目錄);自動建立hdfs, mapred使用者,hdfs使用者是hdfs的最高許可權使用者,mapred使用者則負責mapreduce執行過程中相關目錄的許可權。

嫦 娥,名人,原生態的Blog

我這個blog,本來是調侃it的 今天順道也調侃一下網際網路熱點 我坦白,我偶爾是看mop的 雖然我覺得他的主力人群應該是20歲左右的人 mop,以及其他 捧紅 過很多女子 至少是網路上有了一定知名度 這些人,我大概是知道的 無論是自戀狂也好 還是智商高也好 或者自暴床事也罷 我沒有太關注過 最近,...

Hibernate使用原生態SQL語句

我前面也有寫過一篇hibernate使用原生態sql語句的方法。但那種方法是新增實體類。沒有表,但要反射實體類進行對映,也就是要寫實體類。有興趣的可以在我部落格裡找到那篇看看。這次我記錄的是不需要寫實體類,資料庫也不需要做檢視。方法如下。1.string sql 這裡面寫的是sql語句,在資料庫中能...

這就是記者的原生態

這就是記者的原生態 讀 記者圈 有感 脫掉記者華麗的外衣,我驚訝的發現,記者,我所崇尚的職業,並不是人們眼中強悍霸道的灰太狼,而是聰明勤快感情豐富的喜羊羊。記者圈 敘述了路飛兒,老匪,蘇蘇,以及 晨報 娛樂部主編南弈等一群已婚的,離婚的,未婚的男女之間那些故事,情事和糗事。作者妙紅並沒有從揭露圈內黑...