生成模型、判別模型、分類問題、標註問題、回歸問題
監督學習方法
所學習到的模型分別稱為生成模型和判別模型
生成方法`由資料學習聯合概率分布 p(x,y)，然後求出條件概率分布 p(y|x) 作為**的模型，即生成模型
模型表示給定了輸入x產生輸出y的生成關係
典型的生成模型：
特點：判別方法`由資料直接學習決策函式 f(x) 或者條件概率分布 p(y|x）作為**的模型，即判別模型。判別方法關心的是對給定的輸入x，應該**什麼樣的輸出y
典型的判別模型：
特點：可用於分類問題的統計學習方法：
標註問題的輸入是乙個觀測序列，輸出是乙個標記序列或狀態序列
常用的統計學習方法：
標準問題在資訊抽取、自然語言處理等領域應用廣泛，是這些領域的基本問題
用於**輸入變數和輸出變數之間的關係。等價於函式擬合（選擇一條函式曲線使其很好地擬合已知資料，且很好的**未知資料）
根據輸入變數和輸出變數之間的關係，可以分為線性回歸和非線性回歸
統計學習方法 樹模型
樹模型 上思維導圖來自知乎 夕小瑤 決策樹演算法主要包括決策樹的生成與剪枝。決策樹可以從兩個方面解釋 決策樹學習的本質是從訓練資料集中歸納出一組分類規則，也可以看做是對特徵空間劃分類的條件概率分布。首先，按照根據統計學習三要素來分析決策樹學習的過程 假設空間 對特徵空間進行劃分所有可能的決策樹 損失...
統計學習方法 1 統計學習方法概論
統計學習的主要特點是 1 統計學習以計算機及網路為平台，是建立在計算機及網路之上的 2 統計學習以資料為研究物件，是資料驅動的學科 3 統計學習的目的是對資料進行 與分析 4 統計學習以方法為中心，統計學習方法構建模型並應用模型進行 與分析 5 統計學習是概率論 統計學 資訊理論 計算理論 最優化理...
《統計學習方法》學習筆記 生成模型與判定模型
監督學習的任務就是學習乙個模型，應用這一模型，對給定的輸入 對應的輸出。這個模型的一般形式為決策函式 y f x y f x 或者條件概率分布 p y x p y x 監督學習方法又可以分為生成方法和判別方法，所學到的模型稱為生成模型和判別模型。生成方法由資料學習聯合概率分布p x,y p x y ...