《白话机器学习》（一）机器学习算法推导过程中的数学基础知识

写在前面

本篇文章长时间更新，主要是为了整理自己在学习各种算法中遇到的数学知识。方便查阅。

一.向量、矩阵求导

１．　$\frac{\partial Ax}{\partial x}=A^T$

２．　$\frac{\partial Ax}{\partial x^T}=A$

３．　$\frac{\partial x^{T}A}{\partial x}=A$

4．　$\frac{\partial (X^{T}AX)}{\partial X}=2AX（A^T=A）$

5．　$\frac{\partial (X^T{A}^{T}AX)}{\partial X}=2A^{T}AX因为(A^{T}A{)}^T=A^{T}A$

二.矩阵转置的性质

１．　$(A\pm B{)}^T=A^T\pm B^T$

2．　$(A\times B{)}^T=B^T\times A^T$

3．　${(A^T)}^T=A$

4．　${(KA)}^T=K{A}^T$