大資料主要職位

2021-10-04 10:50:44 字數 1232 閱讀 8671

大資料主要有以下職位:

1)資料分析師data analyst:指熟悉相關業務,熟練搭建資料分析框架,掌握和使用相關的分析常用工具和基本的分析方法,進行資料蒐集、整理、分析,針對資料分析結論給管理銷售運營提供指導意義的分析意見。

2)資料架構師data architect:對hadoop解決方案的整個生命週期進行引導,包括需求分析,平台選擇,技術架構設計,應用設計和開發,測試和部署。深入掌握如何編寫mapreduce的作業及作業流的管理完成對資料的計算,並能夠使用hadoop提供的通用演算法, 熟練掌握hadoop整個生態系統的元件如: yarn,hbase、hive、pig等重要元件,能夠實現對平台監控、輔助運維系統的開發。

3)大資料工程師big dataengineer:收集和處理大規模的原始資料(包括指令碼編寫,網頁獲取,呼叫apis,編寫sql查詢等);將非結構化資料處理成適合分析的一種形式,然後進行分析;根據所需要的和專案分析商業決策。

4)資料倉儲管理員data warehousemanager:指定並實施資訊管理策略;協調和管理的資訊管理解決方案;多個專案的範圍,計畫和優先順序安排;管理倉庫的各個方面,比如資料外包,移動,質量,設計和實施。

5)資料庫管理員database manager:提高資料庫工具和服務的有效性;確保所有的資料符合法律規定;確保資訊得到保護和備份;做定期報告;監控資料庫效能;改善使用的技術;建立新的資料庫;檢測資料錄入程式;故障排除。

6)商業智慧型分析員businessintelligence analyst:就工具,報告或者元資料增強來進行傳播資訊;進行或協調測試,以確保情報的定義與需求相一致;使用商業智慧型工具來識別或監測現有和潛在的客戶;綜合目前的商業只能和趨勢資料,來支援採取行動的建議;維護或更新的商業智慧型工具,資料庫,儀表板,系統或方法;及時的管理使用者流量的商業情報。

7)資料庫開發員databasedeveloper:設計,開發和實施基於客戶需求的資料庫系統;優化資料庫系統的效能效率;準備設計規範和功能單證的分配資料庫的專案;對資料庫系統進行空間管理和容量規劃;建立資料庫表和字典;參與資料庫設計和架構,以支援應用程式開發專案;執行資料備份和檔案上定期;測試資料庫,並進行錯誤修正;及時解決資料庫相關的問題;制定安全程式,以保護資料庫免受未經授權的使用;評估現有的資料庫,並提出改進建議的執行效率;開發用於資料庫設計和開發活動的最佳實踐。

大資料就業方向中,主要劃分為哪些職位?

一 etl研發 etl研發,主要負責將分散的 異構資料來源中的資料如關係資料 平面資料檔案等抽取到臨時中間層後進行清洗 轉換 整合,最後載入到資料倉儲或資料集市中,成為聯機分析處理 資料探勘的基礎。二 hadoop開發 hadoop的核心是hdfs和mapreduce.hdfs提供了海量資料的儲存,...

大資料就業方向中,主要劃分為哪些職位?

一 etl研發 etl研發,主要負責將分散的 異構資料來源中的資料如關係資料 平面資料檔案等抽取到臨時中間層後進行清洗 轉換 整合,最後載入到資料倉儲或資料集市中,成為聯機分析處理 資料探勘的基礎。二 hadoop開發 hadoop的核心是hdfs和mapreduce.hdfs提供了海量資料的儲存,...

PM的主要職責

我們湯老大那天在歡送研三的交流會說到it業也有很多適合女生做的職位,除了測試,乙個新的名詞頭一次那麼清晰地印入我的腦袋裡。pm 產品經理。說不出為什麼,可能是終於能擺脫掉沉悶的工作氛圍,有更多的機會來與人打交道,突然覺得莫名的喜歡。有了方向,比什麼都好!了解了下pm的工作職責。很有挑戰性!但我很喜歡...