Elasticsearch生產環境碰到的問題

2021-09-11 16:13:38 字數 273 閱讀 2299

1、資料節點產生問題,有時候也會導致master節點產生問題, 資料節點記憶體滿了,gc很嚴重,主節點下發集群狀態,下發30秒超時,資料節點又沒有死,就會造成阻塞,其他請求無法處理, 因為主節點只有乙個執行緒處理集群狀態

2、集群剛剛啟動的時候,很多pending task在處理,close一些索引的操作來不及處理就記憶體滿了,覺得put setting應該設定一些優先順序,close優先順序更高

3、資料入庫的時候,主資料和副本資料都需要消耗同樣的cpu,建立索引檔案,為什麼不使用同步方式減小cpu消耗呢?

生產環境的 ElasticSearch 安裝指南

elasticsearch 作為優秀的分布式搜尋引擎,在企業中得到了廣泛的應用,可以儲存海量的資料,還能像資料庫一樣各種條件檢索和操作,本文主要記錄下安裝的過程,大多數都參考的官方的文件來操作的,包括系統的設定和 es 集群的一些配置。在檔案中 etc security limits.conf增加,...

elasticsearch配置詳解

elasticsearch的config資料夾裡面有兩個配置檔案 elasticsearch.yml和logging.yml,第乙個是es的基本配置檔案,第二個是日誌配置檔案,es也是使用log4j來記錄日誌的,所以logging.yml裡的設定按普通log4j配置檔案來設定就行了。下面主要講解下e...

誰在使用Elasticsearch

github github使用elasticsearch搜尋20tb的資料,包括13億的檔案和1300億行的 這個不用介紹了吧,碼農們都懂的,github在2013年1月公升級了他們的 搜尋,由solr轉為elasticsearch,目前集群規模為26個索引儲存節點和8個客戶端節點 負責處理搜尋請求...