管理Hadoop集群的5大工具

2021-06-06 15:58:21 字數 1211 閱讀 4713

**:

當你利用hadoop進行大資料分析和處理時,首先你需要確保配置、部署和管理集群。這個即不容易也沒有什麼樂趣,但卻受到了開發者們的鍾愛。本文提供了5款工具幫助你實現。

apache ambari是對hadoop進行監控、管理和生命週期管理的開源專案。它也是乙個為hortonworks資料平台選擇管理組建的專案。ambari向hadoop mapreduce、hdfs、 hbase、pig, hive、hcatalog以及zookeeper提供服務。

apache mesos是集群管理器,可以讓使用者在同一時間同意集群上執行多個hadoop任務或其他高效能應用。twitter的開放源**經理chris aniszczyk表示,mesos可以在數以百計的裝置上執行,並使其更容易執行工作。

stackiq rock+ big data是一款rocks的商業流通集群管理軟體,該公司已加強支援apache hadoop。rock+支援apache、cloudera、hortonworks和mapr的分布,並且處理從裸機伺服器來管理hadoop集群配置的整個過程。

zettaset orchestrator是端到端的hadoop管理產品,支援多個hadoop的分布。zettaset吹捧orchestrator的基於ui的經驗和maaps(管理、可用性、自動化、配置和安全)的處理能力。

網路管理十大工具

假輿馬者,非利足也,而致千里 假舟楫者,非能水也,而絕江河。我們在何種程度上充分利用了工具來代替手工,決定著我們提公升了多少 實際的效率。今天,我們分享10個免費的網路工具和實用程式,這些工具可以幫組大家用於檢測網路,查閱資料,更換韌體來增強網路效能等等。你會發現不論在 家庭網路還是辦公網路中,它們...

Hadoop五大工具元件Redis的安裝

tar zxvf redis 3.2 6.tarmake version 檢測是否存在安裝 make 如果沒有安裝make的話進行安裝 sudo yum install y make 安裝make make test 進行make測試 這裡很可能報錯一般是沒有安裝gcc 和gcc c export ...

ARM的三大工具鏈

前言 學習linux的過程中,看到過多很多程式並且編譯過,使用過很多嵌入式整合開發平台,如iar,keil mdk arm,ds 5等。有時候會遇到很奇怪的現象 對於同一種功能的 不同的平台下程式的框架大致相同,但是程式指令會不一樣 對原始檔的編譯,連線等操作的指令也出出現不同 對於段section...