機器學習數學基礎之矩陣理論(二)

2021-08-08 23:38:52 字數 773 閱讀 4462

目錄

一、線性空間

1.    線性空間的概念

(1) 線性空間的定義

(2) 線性空間的本質

2.    線性空間的基

(1) 線性表示

(2) 線性相關

(3) 線性無關

(4) 線性空間基的定義

(5) 座標

3.   線性空間的範數

(1) 範數的定義

(2) 賦範線性空間中的距離

(3) 歐幾里得範數

(4) lp範數

(5) frobenius範數,矩陣中常用的範數

二、  矩陣分解

1.   方陣的正交分解

(1) 特徵值和特徵向量的定義

(2) 特徵值:

(3) 特徵向量:

(4) 矩陣分解

(5) 特徵向量與其特徵值之間的關係

2.   正交分解

(1) 正交矩陣

(2)  標準正交基

(3)  正交矩陣的性質

(4)  正交分解

3.   矩陣的奇異值分解(svd)

(1) 非退化方陣的svd

(2) 一般矩陣的svd

(3) 偽逆(moor-penrose)

(4) 不相容線性方程組的解

(5)  定理

4.   主成分分析(pca)

一、線性空間

1. 線性空間的概念

(1)  線性空間的定義

設v是乙個非空集合,r為實數域。如果對於任意兩個元素

機器學習之相關數學基礎

1 函式 2 極限 3 導數 4 極值和最值 5 泰勒級數 6 梯度 7 梯度下降 1 基本概念 2 行列式 3 矩陣 4 最小二乘法 5 向量的線性相關性 1 事件 2 排列組合 3 概率 4 貝葉斯定理 5 概率分布 6 期望和方差 7 引數估計 1 p2 概率論與貝葉斯先驗 2 p3 矩陣和線...

數學基礎 矩陣學習

乙個 m x n 的矩陣是由m行n列勻速排序成的矩形陣列 m x n的矩陣只能與 n x p的矩陣相乘,得到是乙個m x p大小的矩陣 新得到的矩陣第i行第j列的元素 是由 第乙個矩陣第i行與第二個矩陣第j列進行點乘得到的。例如 矩陣乘法不滿 換律 除非特別情況 但是滿足結合律與分配律 注意 實際開...

機器學習 數學基礎

scalar 標量 sunspot number dalton minimum exponentiation 指數化 資訊理論 對數函式 log2 sigmod 啟用函式 relu 啟用函式 vector 向量 vector space 向量空間 歐幾里德空間 笛卡爾座標系 極座標系 norm of...