elk面試題 15天搞定ELK海量日誌分析平台

一、elasticsearch 環境準備及核心技術講解

1、elasticsearch 概念及架構原理

2、elasticsearch 分布式集群安裝部署

3、elasticsearch 核心外掛程式，比如security安全外掛程式、watcher報警外掛程式、marvel 管理和查詢外掛程式

4、elasticsearch 核心概念，比如cluster集群，shards分片，replicas副本等

5、elasticsearch api操作，常見的建立索引功能和複雜查詢功能(包括精確查詢、字段置頂查詢、高亮顯示、過濾、排序、聚合aggregate等)

6、elasticsearch 整合中文分詞器ik，支援中文查詢與索引

7、從原始碼層面分析elasticsearch中的routing路由功能

8、elasticsearch 企業級優化

9、實戰：elasticsearch 實現極速查詢

二、logstash 環境準備及核心元件講解

1、logstash 核心配置語法以及filebeat元件的靈活使用

2、logstash安裝部署及使用技巧

3、logstash input外掛程式採集file、eventlog、jdbc、kafka、redis、s3等資料來源

4、logstash 核心filter外掛程式，比如grok、geoip、json等

5、logstash output外掛程式將採集資料靈活輸出到不同系統，比如elasticsearch、file、kafka、redis等

6、實戰：logstash 實現海量日誌採集、過濾、解析、輸出

三、kibana 環境準備及核心功能講解

1、kibana 概述

2、kibana 安裝部署及使用技巧

3、kibana 實現資料查詢

4、kibana 實現資料視覺化

5、kibana 監控預警

6、實戰：kibana 將採集到的海量資料進行資料分析、資料查詢，並構建圖表視覺化

四、elk平台架構及專案實戰

1、結合企業真實專案需求，分析elk架構的應用場景和價值

3、動手構建elk 海量日誌分析平台

4、利用logstash實時採集不同專案系統的海量異常堆疊資訊(可以實現跨行收集每條異常堆疊資訊)，對海量資料進行過濾和解析，同時可以自定義匹配模式解析專案中的複雜結構日誌，並按日誌類別和日期回滾輸出到elasticsearch集群建立索引

5、利用elasticsearch 實現對海量資料的實時查詢

6、利用kibana 實現海量日誌的分析查詢、資料視覺化及監控預警

7、elk 專案優化以及大資料專案經驗分享

五、大資料面試真題現場剖析

1、針對企業中的乙個典型需求展開分析【針對一批海量資料，既要實現全量儲存，又要實現快速複雜查詢】

常見問題

q：會有實際上機演示和動手操作嗎？

a：本課程為專案拆解課，全程實操演練！不僅僅是簡單演示，而是手把手帶你操練真實專案。

a：每個班級會建立專門的班級qq群，學員可以針對課程中的問題，或者自己學習與動手實踐中的問題，向老師提問，老師會進行相應解答。同時，強烈推薦大家到官網技術問答區提問，方便知識的沉澱，同時也避免因為qq群資訊刷屏而導致你的問題被老師錯過。