1. 余子式和代数余子式
1) 余子式
nnn 阶行列式中,划去元 aija_{ij}aij 所在的第 iii 行与第 jjj 列的元,剩下的元不改变原来的顺序所构成的 n−1n-1n−1 阶行列式称为元 aija_{ij}aij 的余子式。
作用:能把 nnn 阶的行列式化简为 n−1n-1n−1 阶。
2) 代数余子式
2. 行列式的含义
行列式,记作 det(A)det(A)det(A),是一个将方阵 AAA 映射到实数的函数。行列式等于矩阵特征值的乘积。行列式的绝对值可以被认为是衡量矩阵相乘后空间扩大或者缩小了多少。如果行列式是 000, 那么空间至少沿着某一维完全收缩了,使其失去了所有的体积。如果行列式是 111, 那么矩阵相乘没有改变空间体积。
行列式等于它任意一行(列)的各元素与其对应的代数余子式乘积之和。
本质含义(几何意义):行列式就是在给定一组基下,NNN 个向量张成的一个 NNN 维广义四边形的体积。222 阶行列式代表的是平面内的面积;333 阶行列式自然而然就是 333 维空间内的体积;444 阶行列式是 444 维空间里的超体积。
3. 矩阵的秩(rank)
1) 基本概念
kkk 阶子式:在一个矩阵或行列式中取 kkk 行 kkk 列,交叉处的 k2k^2k2 个元素按原顺序构成的行列式。
[1] 从子式的角度定义:矩阵的秩就是矩阵中非零子式的最高阶数。
[2] 从极大线性无关组的角度定义:矩阵的所有行向量中极大线性无关组的元素个数。
[3] 从标准型的角度定义:求一个矩阵的秩,可以先将其化为行阶梯型,非零行的个数即为矩阵的秩。(行阶梯型矩阵的秩等于其非零行的行数。)
2) 与向量组的关系
矩阵的秩等于它列向量组的秩,也等于它行向量组的秩。
向量组的秩定义为向量组的极大线性无关组所含向量的个数。
3) 与向量空间的关系(几何意义)
任何矩阵的行空间的维数等于矩阵的列空间的维数等于矩阵的秩。
4) 与线性方程组解的关系
设 AAA 是 m×nm×nm×n 矩阵,若 R(A)=r<nR(A)=r<nR(A)=r<n,则齐次线性方程组 Ax=0Ax=0Ax=0 有基础解系,且每个基础解系都含 n−rn-rn−r 个解向量。
4. 矩阵的迹
方阵 A(n∗n)A(n*n)A(n∗n) 的迹定义为对角线元素的和。即:
5. 线性方程组解的情况 / 判断一个线性方程组是否有解有哪几种方法?
1) 对于齐次线性方程组Ax=0Ax=0Ax=0
r(A)=nr(A)=nr(A)=n,有惟一零解;r(A)<nr(A)<nr(A)<n,有无穷多解。
2) 对于非齐次线性方程组Ax=bAx=bAx=b
r(A)≠r(A,b)r(A)≠r(A,b)r(A)=r(A,b),无解;r(A)=r(A,b)=nr(A)=r(A,b)=nr(A)=r(A,b)=n,有唯一解;r(A)=r(A,b)<nr(A)=r(A,b)<nr(A)=r(A,b)<n,有无穷多解。
6. 线性相关与线性无关
1) 含义
向量组A线性无关的充分必要条件是 R(A)=mR ( A ) = mR(A)=m.
2) 几何意义
一组矢量的线性相关性本质上,是描述他们所张成的广义平行四边形体积是否为零。NNN 个向量线性无关⇔他们所张成的N维体体积不为零。于是有:线性无关矢量组成的矩阵的行列式不为零;线性相关矢量组成的矩阵的行列式必为零。
3) 一个矩阵线性无关的等价定义有什么?
非奇异矩阵、矩阵可逆、矩阵满秩、特征值没有 000。(奇异矩阵:行列式等于零的矩阵(方阵)。)
7. 线性空间(向量空间)
nnn 维向量构成的非空集合,对于向量加法和数乘两种运算封闭。
给元素装配了加法和数乘的非空集合。
8. 向量空间的基与维数
1) 基
设 VVV 是一向量空间,α1,α2,…,αr∈Vα_1,α_2,…,α_r∈Vα1,α2,…,αr∈V 且满足:
a) α1,α2,…,αrα_1,α_2,…,α_rα1,α2,…,αr 线性无关;
b) VVV 中向量均可由 α1,α2,…,αrα_1,α_2,…,α_rα1,α2,…,αr 线性表示。
则称 α1,α2,…,αrα_1,α_2,…,α_rα1,α2,…,αr 为 VVV 的一个基。
2) 维数
基中所含向量个数 rrr 称为向量空间的维数。
9. 特征值和特征向量
1) 定义
对方阵 AAA 满足:Ax=λxAx=λxAx=λx,其中 xxx 为非零向量,则称 xxx 为特征向量,λλλ 为特征值。
2) 矩阵的特征值与特征向量有什么关系?
[1] 一个特征值可能对应多个特征向量,一个特征向量只能属于一个特征值。
[2] 属于不同特征值的特征向量一定线性无关。
[3] 设 λλλ 是 nnn 阶方阵 AAA 的一个 kkk 重特征值(λλλ 为特征方程的 kkk 重根),对应于 λλλ 的线性无关的特征向量的最大个数为 lll,则 k≥lk≥lk≥l,即特征值 λλλ 的代数重数不小于几何重数。
3) 特征值和特征向量的意义
如果一个向量投影到一个方阵定义的空间中只发生伸缩变化,而不发生旋转变化,那么该向量就是这个方阵的一个特征向量,伸缩的比例就是特征值。
特征向量的代数含义是:将矩阵乘法转换为数乘操作;特征向量的几何含义是:特征向量通过方阵 AAA 变换只进行伸缩,而保持特征向量的方向不变。特征值表示的是这个特征到底有多重要,类似于权重,而特征向量在几何上就是一个点,从原点到该点的方向表示向量的方向。
10. 相似矩阵
11. 什么是向量正交?什么是矩阵正交?
若(α,β)=0(α,β)=0(α,β)=0,则称向量 ααα 与 βββ 正交。
若 nnn 阶方阵 AAA 满足 ,则称 AAA 为 nnn 阶正交矩阵。
12. 正交矩阵
矩阵的转置和矩阵的乘积=单位阵,那么这个矩阵就是正交矩阵,它的列向量组一定是标准正交向量组。
正交矩阵是指矩阵的转置等于矩阵的逆的矩阵。
13. 合同矩阵
14. 什么是正定矩阵?什么是半正定矩阵?
1) 正定矩阵
-
前提:矩阵是对称的
-
正定矩阵的所有特征值大于零
-
各阶主子式大于零
2) 半正定矩阵
-
多元正态分布的协方差矩阵要求是半正定的。
-
15. 相似与对角化
相似对角化后,对角线的值就是矩阵 AAA 的 nnn 个特征值。
16. 向量范数与矩阵范数
1) 向量范数
-
111-范数:
,即向量元素绝对值之和,xxx 到零点的曼哈顿距离。
-
222-范数:
,Euclid范数(欧几里得范数,常用于计算向量长度),即向量元素绝对值的平方和再开方,表示 xxx 到零点的欧式距离。
-
∞∞∞-范数:
,即所有向量元素绝对值中的最大值。
-
−∞-∞−∞-范数:
,即所有向量元素绝对值中的最小值。
-
ppp-范数:
,即向量元素绝对值的 ppp 次方和的 1p\frac{1}{p}p1 次幂,表示 xxx 到零点的 ppp 阶闵氏距离。
2) 矩阵范数