作業一 大資料概述與學習資源

2022-08-26 00:33:17 字數 509 閱讀 8934

number型別,string型別布林型別object型別

微博資料型別:number、varchar,date ,name

大資料又是人工智慧的重要基礎,人工智慧需要通過大資料完成學習和決策的過程。從整個智慧型系統的體系結構來看,物聯網是觸角,雲計算是支撐平台,大資料提供資料分析,人工智慧完成最終的決策。

區塊鏈技術未來與大資料技術的結合應用將會帶來一系列重要的改變,區塊鏈技術本身就是一種資料儲存方式,而且區塊鏈訪問的資料具有較強的安全性和防篡改特性,大資料與區塊鏈的結合還能解決資料價值化過程中的「確權」問題和流通問題,可以說未來大資料與區塊鏈的結合將更加緊密。

4.大資料作為一門基礎科學,無論在資料開發及分析、物聯網和人工智慧演算法訓練領域,都有著核心技術和職位訴求,主要來說的話,當下,大資料方面的就業主要有三大方向:一是資料分析類大資料人才,二是系統研發類大資料人才,三是應用開發類大資料人才。

作業一 大資料概述與學習資源

2 選擇乙個你感興趣的領域應用資料思維進行分析決策的案例。遊戲上使用大資料的地方很多。聚類就是一種方法。聚類是對所有的玩家進行的分類,比常規的維度要多,要全方位的對玩家進行分析,聚類相當於將n個散亂的點通過機器學習的演算法聚為一類,這一類的點之間會是最相似的。我們可以通過大資料分析流失玩家和潛在的付...

作業一 大資料概述與學習資源

1.資料型別 主要是聊天記錄。微博 造成不同的比例 3者都屬於社交資料。2.選擇乙個你感興趣的領域應用資料思維進行分析決策的案例。遊戲上使用大資料的地方很多。聚類就是一種方法。聚類是對所有的玩家進行的分類,比常規的維度要多,要全方位的對玩家進行分析,聚類相當於將n個散亂的點通過機器學習的演算法聚為一...

一 大資料概述

1.列舉hadoop生態的各個元件及其功能 以及各個元件之間的相互關係,以圖呈現並加以文字描述。答 主要的核心元件有hdfs和mapreduce,其他還包括zookeeper hbase hive pig mahout sqoop flume ambari等功能元件 hdfs hdfs具有很好的容錯...