這個課程以乙個專案來講解spark中怎麼使用線性回歸、邏輯回歸以及svm等演算法模型。
專案主要是**航班的延遲時間，專案是按照如下的流程來講解：
在模型訓練地方，詳細講解了交叉驗證的功能
【老湯人工智慧】機器學習課程體系分為三部分：
機器學習一之數學基礎(從微積分和線性代數兩個方面講解機器學習需要的數學知識
機器學習四之模型除錯( )：講解機器學習中怎麼來評估模型、測試模型以及怎樣定位模型問題等
機器學習五之svm演算法(講解機器學習中應用很廣泛的支援向量機演算法(即svm演算法)
機器學習七之決策樹演算法(講解機器學習中決策樹演算法，以及基於決策樹的回歸樹演算法、提公升樹演算法以及梯度提公升演算法等演算法
機器學習八spark機器學習實戰二(運動資料分類
機器學習九之非監督型別演算法(講解機器學習中非監督型別的演算法，包括：聚類演算法(k-means演算法)以及pca降維演算法
scala、spark core、spark sql以及spark streaming的學習，請在51cto學院搜尋"老湯"
Spark簡單案例實戰
一.給定一組鍵值對 spark 2 hadoop 6 hadoop 4 spark 6 鍵值對的key表示圖書名稱，value表示每天圖書銷量，請計算出每個鍵對應的平均值，也就是每種圖書每天的平均銷量。1.如下 val book array spark 2 hadoop 6 hadoop 4 spa...
Spark簡單使用
spark的乙個主要特點就是可以在記憶體中使用，因此他的計算速度比較快。在初學之前按照 quick start.html 中的示例來做一遍。先來初步理解一下操作流程。1.首先是搭建spark,網上有很多教程，cmd中最後執行pyspark 我們首先來分析spark資料夾中的 readme.md 檔案...
spark簡單介紹
一，spark歷史 誕生於2009年，加州大學伯克利分校rad實驗室的乙個研究專案，最初是基於hadoop mapreduce 的，發現mapreduce在迭代式計算和互動式上低效，引入了記憶體儲存。2010年3月份spark開源 2011年amp實驗室在spark上開發高階元件，例如 spark ...