福利 微分享 大資料入門技術初探

2021-08-19 12:55:22 字數 433 閱讀 6867

提到大資料技術,大多數開發者首先想到的技術莫過於hadoop和spark。他們都是大資料框架,也是當前應用最廣泛的大資料框架。

4月11晚8點(本周二),csdn大資料學習班將迎來咱們的第一期知識大咖分享活動,主要分享開源的大資料技術,特別適合大資料初學者們學習。

嘉賓介紹

王福振,畢業於河北工業大學,資訊管理與資訊系統專業,研究生期間主修資料倉儲與資料探勘,接觸到了hive等系列大資料平台。畢業後,一直從事hadoop生態相關的工作。現就職於天津南大通用技術股份****,為gbase up團隊大資料研發工程師。

分享簡介

圍繞hadoop技術架構展示敘述,分享大資料學習的一些入門知識及心得體會。

參與方式:

大資料 技術入門03

yarn是資源管理系統,理論上支援多種資源,目前支援cpu和記憶體兩種資源 yarn產生背景 直接源於mrv1在幾個方面的缺陷 擴充套件性受限 單點故障 難以支援mr之外的計算 多計算框架各自為戰,資料共享困難 mr 離線計算框架 storm 實時計算框架 spark 記憶體計算框架 yarn設計目...

大資料的收集與處理技術分享

大資料從收集 處理 到最終落地為可商業化 可以惠及普羅大眾的解決方案 產品的閉環鏈條。所謂從群眾中來,到群眾中去。正是這個鏈條的關閉 完成了大資料的工業化。之所以大資料概念能夠在近3年突然引爆,恰恰就是因為現階段處理和收集大資料的能力發生了質變,使得人類社會走進了大資料應用普及的時代 1 大資料的收...

分享大資料技術Hbase和Hive詳解

今天給大家介紹一下關於零基礎學習大資料之hbase和hive是多麼重要的技術,那麼兩者有什麼區別呢?下面我們一起來看一下吧。apachehive是乙個構建在hadoop基礎設施之上的資料倉儲。通過hive可以使用hql語言查詢存放在hdfs上的資料。hql是一種類sql語言,這種語言最終被轉化為ma...