hadoop發行版本之間的區別

2021-08-28 05:33:25 字數 1256 閱讀 1108

hadoop發行版本之間的區別

hadoop是乙個能夠對大量資料進行分布式處理的軟體框架。 hadoop 以一種可靠、高效、可伸縮的方式進行資料處理。hadoop的發行版除了有apache hadoop外cloudera,hortonworks,mapr,華為,dkhadoop等都提供了自己的商業版本。商業發行版主要是提供了更為專業的技術支援,這對於大型企業更為重要,不同發行版都有自己的一些特點,本文就各發行版做簡單對比介紹。

對比版選擇:dkhadoop發行版、cloudera發行版、hortonworks發行版、mapr發行版、華為hadoop發行版

1、dkhadoop發行版:有效的整合了整個hadoop生態系統的全部元件,並深度優化,重新編譯為乙個完整的更高效能的大資料通用計算平台,實現了各部件的有機協調。因此dkh相比開源的大資料平台,在計算效能上有了高達5倍(最大)的效能提公升。dkhadoop將複雜的大資料集群配置簡化至三種節點(主節點、管理節點、計算節點),極大的簡化了集群的管理運維,增強了集群的高可用性、高可維護性、高穩定性。

2、cloudera發行版:cdh是cloudera的hadoop發行版,完全開源,比apache hadoop在相容性,安全性,穩定性上有增強。

3、hortonworks發行版:hortonworks 的主打產品是hortonworks data platform (hdp),也同樣是100%開源的產品,其版本特點:hdp包括穩定版本的apache hadoop的所有關鍵元件;安裝方便,hdp包括乙個現代化的,直觀的使用者介面的安裝和配置工具。

4、mapr發行版:mapr有免費和商業兩個版本,免費版本在功能上有所減少。

5、華為hadoop發行版:華為的hadoop版本基於自研的hadoop ha平台,構建namenode、jobtracker、hiveserver的ha功能,程序故障後系統自動failover,無需人工干預,這個也是對hadoop的小修補,遠不如mapr解決的徹底。

Hadoop 三大發行版本

hadoop三大發行版本 apache cloudera hortonworks。apache版本最原始 最基礎 的版本,對於入門學習最好。cloudera在大型網際網路企業中用的較多。hortonworks文件較好。1 2008年成立的cloudera是最早將hadoop商用的公司,為合作夥伴提供...

Hadoop國內主要發行版本

目前國內使用的不收費的hadoop版本主要包括以下3個 2008 年成立的 cloudera 是最早將 hadoop 商用的公司,為合作夥伴提供 hadoop 的商用解決方案,主要是包括支援,諮詢服務,培訓。2009年hadoop的創始人 doug cutting也任職於 cloudera 公司。c...

ubuntu發行版本

ubuntu 4.10 warty warthog 長疣的疣豬 發布日期 2004年10月20日 ubuntu 5.04 hoary hedgehog 灰白的刺蝟 發布日期 2005年4月8日 ubuntu 5.10 breezy badger 活潑的獾 發布日期 2005年10月13日 ubunt...