在hadoop+hbase分布式集群中，有引數來控制資料副本，在hadoop的conf目錄下，hdfs-site.xml中的屬性dfs.replication可以明確指明副本數目。
但是在實驗中，儘管將每個節點上的dfs.replication屬性都設定為1，但是實際資料的副本還是為3。
經過多次實驗，解決方法是在hbase的的conf下的配置檔案hbase-site中加上引數屬性dfs.replication，將它設定為1，並將此操作運用到每個regionsever上。重啟hbase後 ，再向資料庫中寫的資料副本就是1了。
Hadoop副本存放策略
副本存放策略 基於機架感知當複製因子為3時，hdfs的放置策略是在編寫器位於datanode上時將乙個副本放在本地計算機上，否則放在隨機datanode上，另乙個副本放在另乙個 遠端 機架上的節點上，最後乙個在同乙個遠端機架的不同節點上。此策略可以減少機架間寫入流量，從而提高寫入效能。機架故障的可能...
控制Elasticsearch分片和副本的分配
es集群中索引可能由多個分片構成，並且每個分片可以擁有多個副本。通過將乙個單獨的索引分為多個分片，我們可以處理不能在乙個單一的伺服器上面執行的大型索引，簡單的說就是索引的大小過大，導致效率問題。不能執行的原因可能是記憶體也可能是儲存。由於每個分片可以有多個副本，通過將副本分配到多個伺服器，可以提高查...
hadoop的許可權控制
hdfs支援許可權控制，但支援較弱。hdfs的設計是基於posix模型的，支援按使用者 使用者組 其他使用者的讀寫執行控制許可權。在linux命令列下，可以使用下面的命令修改檔案的許可權 檔案所有者，檔案所屬組 hadoop fs chmod 修改檔案所有者，檔案所屬組，其他使用者的讀 寫 執行許可...