機器學習算法推導過程中的數學基礎知識

1、向量、矩陣求導

當然了，這里補充一下求解過程中的關於向量、矩陣求導的幾個公式：

 

 

這里其實只需要明白第一個，后邊的三個都可以由第一個簡單的推導而來。

注意這里對列向量AX的每一項的求導寫為行，不然就會得到一個超越矩陣，我們不采用這種方式。