今天介紹向量空間的三個基本概念,基,緯度,和秩。
基
此前我們介紹過線性無關,基的定義正基於此。令 H H H 為向量空間 V V V 的一個子空間,如果一個 V V V 中的向量有序集合 B = { b 1 ⃗ , ⋯ , b p ⃗ } \mathcal{B}=\left\{ \vec{b_1}, \cdots, \vec{b_p} \right\} B = { b 1 , ⋯ , b p } ,滿足下列兩個條件,便稱為 H H H 的一個基:
B \mathcal{B} B 線性無關
B \mathcal{B} B 張成 H H H ,即 H = Span { b 1 ⃗ , ⋯ , b p ⃗ } H = \text{Span}\left\{ \vec{b_1}, \cdots, \vec{b_p} \right\} H = Span { b 1 , ⋯ , b p }
以下例為例:
例1 :找下列矩陣 A A A 的零空間的一個基。
A = [ − 3 6 − 1 1 − 7 1 − 2 2 3 − 1 2 − 4 5 8 − 4 ] A = \begin{bmatrix} -3 & 6 & -1 & 1 & -7 \\ 1 & -2 & 2 & 3 & -1 \\ 2 & -4 & 5 & 8 & -4 \end{bmatrix}
A = ⎣ ⎡ − 3 1 2 6 − 2 − 4 − 1 2 5 1 3 8 − 7 − 1 − 4 ⎦ ⎤
SOLUTION
首先得解出 A x ⃗ = 0 ⃗ A\vec{x} = \vec{0} A x = 0 ,找到零空间的特点,再据此做判断。这样有 [ A 0 ⃗ ] ∼ [ 1 − 2 0 − 1 3 0 0 0 1 2 − 2 0 0 0 0 0 0 0 ] \begin{bmatrix} A & \vec{0} \end{bmatrix} \sim \begin{bmatrix} 1 & -2 & 0 & -1 & 3 & 0 \\ 0 & 0 & 1 & 2 & -2 & 0 \\ 0 & 0 & 0 & 0 & 0 & 0 \end{bmatrix} [ A 0 ] ∼ ⎣ ⎡ 1 0 0 − 2 0 0 0 1 0 − 1 2 0 3 − 2 0 0 0 0 ⎦ ⎤ ,其中:
{ x 1 = 2 x 2 + x 4 − 3 x 5 x 2 is free x 3 = − 2 x 4 + 2 x 5 x 4 is free x 5 is free \begin{cases}
&x_1 = 2x_2+x_4-3x_5\\
&x_2 \text{ is free} \\
&x_3 =-2x_4+2x_5\\
&x_4 \text{ is free}\\
&x_5 \text{ is free}
\end{cases}
⎩ ⎪ ⎪ ⎪ ⎪ ⎪ ⎪ ⎨ ⎪ ⎪ ⎪ ⎪ ⎪ ⎪ ⎧ x 1 = 2 x 2 + x 4 − 3 x 5 x 2 is free x 3 = − 2 x 4 + 2 x 5 x 4 is free x 5 is free
[ x 1 x 2 x 3 x 4 x 5 ] = [ 2 x 2 + x 4 − 3 x 5 x 2 (free) − 2 x 4 + 2 x 5 x 4 (free) x 5 (free) ] = x 2 [ 2 1 0 0 0 ] + x 4 [ 1 0 − 2 1 0 ] + x 5 [ − 3 0 2 0 1 ] \begin{bmatrix}
&x_1&\\
&x_2&\\
&x_3&\\
&x_4&\\
&x_5&
\end{bmatrix}
=
\begin{bmatrix}
&2x_2+x_4-3x_5&\\
&x_2 \text{ (free)}&\\
&-2x_4+2x_5& \\
&x_4 \text{ (free)}&\\
&x_5 \text{ (free)}&
\end{bmatrix}
=
x_2\begin{bmatrix}&2&\\ &1&\\ &0&\\ &0&\\ &0& \end{bmatrix}+
x_4\begin{bmatrix}&1&\\ &0&\\ &-2&\\ &1& \\ &0& \end{bmatrix}+
x_5\begin{bmatrix}&-3&\\ &0&\\ &2&\\ &0&\\ &1& \end{bmatrix}
⎣ ⎢ ⎢ ⎢ ⎢ ⎡ x 1 x 2 x 3 x 4 x 5 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ = ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 2 x 2 + x 4 − 3 x 5 x 2 (free) − 2 x 4 + 2 x 5 x 4 (free) x 5 (free) ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ = x 2 ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 2 1 0 0 0 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ + x 4 ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 1 0 − 2 1 0 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ + x 5 ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ − 3 0 2 0 1 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤
注意三個自由變量後面的三個向量線性無關,因為這三個向量都是伴隨著自由變量產生,實際上:
[ 2 x 2 + x 4 − 3 x 5 x 2 (free) − 2 x 4 + 2 x 5 x 4 (free) x 5 (free) ] = [ 2 x 2 x 2 0 0 0 ] + [ x 4 0 − 2 x 4 x 4 0 ] + [ − 3 x 5 0 2 x 5 0 x 5 ] \begin{bmatrix}
&2x_2+x_4-3x_5&\\
&x_2 \text{ (free)}&\\
&-2x_4+2x_5& \\
&x_4 \text{ (free)}&\\
&x_5 \text{ (free)}&
\end{bmatrix}
=
\begin{bmatrix}&2x_2&\\ &x_2&\\ &0&\\ &0&\\ &0& \end{bmatrix}+
\begin{bmatrix}&x_4&\\ &0&\\ &-2x_4&\\ &x_4& \\ &0& \end{bmatrix}+
\begin{bmatrix}&-3x_5&\\ &0&\\ &2x_5&\\ &0&\\ &x_5& \end{bmatrix}
⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 2 x 2 + x 4 − 3 x 5 x 2 (free) − 2 x 4 + 2 x 5 x 4 (free) x 5 (free) ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ = ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 2 x 2 x 2 0 0 0 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ + ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ x 4 0 − 2 x 4 x 4 0 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ + ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ − 3 x 5 0 2 x 5 0 x 5 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤
對於變量 x i x_i x i ,若它是自由變量,寫成參數向量時,其他向量的第 i i i 行一定為 0。故只有 x 2 , x 4 , x 5 x_2, x_4, x_5 x 2 , x 4 , x 5 全為 0 時,才有上述三個向量的線性組合為零向量。同時,這三個向量很顯然能張成 A A A 的零空間,故這三個向量就是 A A A 的零空間的一個基。
例2 找到下列矩陣 B B B 的列空間一個基。
B = [ 1 0 − 3 5 0 0 1 2 − 1 0 0 0 0 0 1 0 0 0 0 0 ] B = \begin{bmatrix} 1 & 0 & -3 & 5 & 0 \\ 0 & 1 & 2 & -1 & 0 \\ 0 & 0 & 0 & 0 & 1 \\ 0 & 0 & 0 & 0 & 0 \end{bmatrix}
B = ⎣ ⎢ ⎢ ⎡ 1 0 0 0 0 1 0 0 − 3 2 0 0 5 − 1 0 0 0 0 1 0 ⎦ ⎥ ⎥ ⎤
有列空間的定義知 Col B = Span { b 1 , b 2 , b 3 , b 4 , b 5 } \text{Col } B= \text{Span }\left \{ b_1, b_2, b_3, b_4, b_5 \right \} Col B = Span { b 1 , b 2 , b 3 , b 4 , b 5 } ,這五個向量並不線性無關,由張成集合定理 可知 Span { b 1 , b 2 , b 3 , b 4 , b 5 } = Span { b 1 , b 2 , b 5 } \text{Span }\left \{ b_1, b_2, b_3, b_4, b_5 \right \} = \text{Span }\left \{ b_1, b_2, b_5 \right \} Span { b 1 , b 2 , b 3 , b 4 , b 5 } = Span { b 1 , b 2 , b 5 } 。這樣 b 1 , b 2 , b 5 b_1, b_2, b_5 b 1 , b 2 , b 5 線性無關,而且張成 Col B \text{Col } B Col B ,所以它就是 Col B \text{Col } B Col B 的一個基。
維度
此處我們討論有限維度向量空間,所謂有限維向量空間指該向量空間可由一些向量集張成。 下面我要討論維度 n n n ,它是向量空間子空間的一個固有屬性,即不論在子空間中選取怎樣的基,基的長度都是恆定的,因其不變的屬性,故將其定義為向量空間的子空間的一個量——維度 。在這之前我們需要證明幾個定理。
引理 設 v 1 ⃗ , ⋯ , v p ⃗ \vec{v_1}, \cdots, \vec{v_p} v 1 , ⋯ , v p 為某一向量空間 V V V 的子空間 H H H 上線性相關的一組向量,則存在 j ∈ 1 , 2 , ⋯ , p j \in {1,2,\cdots,p} j ∈ 1 , 2 , ⋯ , p 使:
v j ∈ Span ( v 1 ⃗ , ⋯ , v j − 1 ⃗ ) v_j \in \text{Span}(\vec{v_1}, \cdots, \vec{v_{j-1}}) v j ∈ Span ( v 1 , ⋯ , v j − 1 ) (從頭開始檢視向量組,總能找到一個向量可以由前面的若干向量線性表出);
從 v 1 ⃗ , ⋯ , v p ⃗ \vec{v_1}, \cdots, \vec{v_p} v 1 , ⋯ , v p 中刪掉 v j ⃗ \vec{v_j} v j 後依舊可以張成 Span ( v 1 ⃗ , ⋯ , v p ⃗ ) \text{Span}(\vec{v_1}, \cdots, \vec{v_p}) Span ( v 1 , ⋯ , v p ) (Span ( v 1 ⃗ , ⋯ , v p ⃗ ) = Span ( v 1 ⃗ , ⋯ , v j − 1 ⃗ , v j + 1 ⃗ , ⋯ , v p ⃗ ) \text{Span}(\vec{v_1}, \cdots, \vec{v_p}) = \text{Span}(\vec{v_1}, \cdots, \vec{v_{j-1}}, \vec{v_{j+1}}, \cdots, \vec{v_p}) Span ( v 1 , ⋯ , v p ) = Span ( v 1 , ⋯ , v j − 1 , v j + 1 , ⋯ , v p ) )
Proof.
因 v 1 ⃗ , ⋯ , v p ⃗ \vec{v_1}, \cdots, \vec{v_p} v 1 , ⋯ , v p 線性相關,故 ∃ a 1 , ⋯ , a p ∈ F , a 1 2 + ⋯ + a p 2 > 0 \exists a_1,\cdots,a_p \in \mathbb{F}, a_1^2+\cdots+a_p^2 > 0 ∃ a 1 , ⋯ , a p ∈ F , a 1 2 + ⋯ + a p 2 > 0 (係數不全為0) s.t. :
a 1 v 1 ⃗ + ⋯ + a p v p ⃗ = 0 ⃗ a_1\vec{v_1} + \cdots + a_p\vec{v_p} = \vec{0}
a 1 v 1 + ⋯ + a p v p = 0
讓 j j j 為 { 1 , ⋯ , p } \{1,\cdots,p\} { 1 , ⋯ , p } 中最大的滿足 a j ≠ 0 a_j \neq 0 a j = 0 的,故:
v j ⃗ = − a 1 a j v 1 ⃗ − ⋯ − − a j − 1 a j v j − 1 ⃗ \vec{v_j}=-\frac{a_1}{a_j}\vec{v_1}-\cdots--\frac{a_{j-1}}{a_j}\vec{v_{j-1}}
v j = − a j a 1 v 1 − ⋯ − − a j a j − 1 v j − 1
則 1 得證。
接下來只消證明,能用 v 1 ⃗ , ⋯ , v p ⃗ \vec{v_1}, \cdots, \vec{v_p} v 1 , ⋯ , v p 線性表出的任意向量也能用 v 1 ⃗ , ⋯ , v j − 1 ⃗ , v j + 1 ⃗ , ⋯ , v p ⃗ \vec{v_1}, \cdots, \vec{v_{j-1}}, \vec{v_{j+1}}, \cdots, \vec{v_p} v 1 , ⋯ , v j − 1 , v j + 1 , ⋯ , v p 線性表出。設任意向量 u ⃗ ∈ Span ( v 1 ⃗ , ⋯ , v p ⃗ ) \vec{u} \in \text{Span}(\vec{v_1}, \cdots, \vec{v_p}) u ∈ Span ( v 1 , ⋯ , v p ) ,即 ∃ d 1 , ⋯ , d p ∈ F , d 1 2 + ⋯ = d p 2 > 0 \exists d_1, \cdots, d_p \in \mathbb{F}, d_1^2 +\cdots = d_p^2 > 0 ∃ d 1 , ⋯ , d p ∈ F , d 1 2 + ⋯ = d p 2 > 0 , s.t.
u ⃗ = d 1 v 1 ⃗ + ⋯ = d p v p ⃗ \vec{u} = d_1\vec{v_1} + \cdots = d_p\vec{v_p}
u = d 1 v 1 + ⋯ = d p v p
後把其中 v j ⃗ \vec{v_j} v j 項通過上面的式子帶入即可消掉,則 2 得證。
注 :選取 j = 1 j=1 j = 1 時, v 1 ⃗ ∈ Span ( ) = 0 ⃗ \vec{v_1} \in \text{Span}()={\vec{0}} v 1 ∈ Span ( ) = 0 ,故 v 1 ⃗ = 0 ⃗ \vec{v_1} = \vec{0} v 1 = 0 。
定理 一個有限緯度的向量空間的子空間中線性無關的向量列表的長度不大於每個可以張成該向量空間的向量列表的長度。
Proof.
假設 u 1 ⃗ , ⋯ , u m ⃗ \vec{u_1}, \cdots, \vec{u_m} u 1 , ⋯ , u m 是向量空間 V V V 中線性無關的一組向量,並且 Span ( w 1 ⃗ , ⋯ , w n ⃗ ) = V \text{Span}\left(\vec{w_1}, \cdots, \vec{w_n}\right) = V Span ( w 1 , ⋯ , w n ) = V 。
u 1 ⃗ , ⋯ , u m ⃗ \vec{u_1}, \cdots, \vec{u_m} u 1 , ⋯ , u m 中任意一個向量都可以被 w 1 ⃗ , ⋯ , w n ⃗ \vec{w_1}, \cdots, \vec{w_n} w 1 , ⋯ , w n 線性表出,故:
u 1 ⃗ , w 1 ⃗ , ⋯ , w n ⃗ \vec{u_1}, \vec{w_1}, \cdots, \vec{w_n}
u 1 , w 1 , ⋯ , w n
線性相關。通過上面引理,可刪掉 w 1 ⃗ , ⋯ , w n ⃗ \vec{w_1}, \cdots, \vec{w_n} w 1 , ⋯ , w n 中的一個向量(u 1 ⃗ \vec{u_1} u 1 不為零向量)後,u 1 ⃗ \vec{u_1} u 1 和剩下的諸 w ⃗ \vec{w} w 仍然可以張成 V V V 。一直重複這個加入 u ⃗ \vec{u} u 和刪除 w ⃗ \vec{w} w 的步驟。現在直接看到最後一步:
u m ⃗ , ⋯ , u 1 ⃗ , w ⃗ ⋯ \vec{u_m}, \cdots, \vec{u_1}, \vec{w} \cdots
u m , ⋯ , u 1 , w ⋯
因 u m − 1 ⃗ , ⋯ , u 1 ⃗ \vec{u_{m-1}},\cdots, \vec{u_1} u m − 1 , ⋯ , u 1 和諸 w ⃗ \vec{w} w 仍可張成 V V V ,故 u m ⃗ \vec{u_m} u m 還可以由其線性表出,但 u 1 ⃗ , ⋯ , u m ⃗ \vec{u_1}, \cdots, \vec{u_m} u 1 , ⋯ , u m 線性無關,此刻若無 w ⃗ \vec{w} w 的幫忙,會引發矛盾。故只好有 n ≥ m n \geq m n ≥ m 。
現在可以證明向量空間子空間的任意基的長度相等了。
定理 有限唯獨的向量空間的子空間的任意兩個基有相同的長度。
Proof.
假設向量空間 V V V 為有限維有一子空間 H H H ,B 1 \mathcal{B_1} B 1 和 B 2 \mathcal{B_2} B 2 為 H H H 的兩個基。
B 1 \mathcal{B_1} B 1 是 V V V 中線性無關的一組向量, B 2 \mathcal{B_2} B 2 能張成 H H H ,故 B 1 \mathcal{B_1} B 1 的長度不小於 B 2 \mathcal{B_2} B 2 (據上定理);
B 2 \mathcal{B_2} B 2 是 V V V 中線性無關的一組向量, B 1 \mathcal{B_1} B 1 能張成 H H H ,故 B 2 \mathcal{B_2} B 2 的長度不小於 B 1 \mathcal{B_1} B 1 (據上定理);
所以 B 1 \mathcal{B_1} B 1 和 B 2 \mathcal{B_2} B 2 的長度相等。現在定義向量空間的維度:
定義 有限維向量空間的子空間的任意基的長度是該向量空間的維度,記為 dim V \text{dim}V dim V 。
秩和零度
定義 矩陣 A A A 的秩 是 A A A 列空間的維度,記為 rank A \text{rank}A rank A 。
例 求下列矩陣的秩:
A = [ − 3 6 − 1 1 − 7 1 − 2 2 3 − 1 2 − 4 5 8 − 4 ] A = \begin{bmatrix} -3 & 6 & -1 & 1 & -7 \\ 1 & -2 & 2 & 3 & -1 \\ 2 & -4 & 5 & 8 & -4 \end{bmatrix}
A = ⎣ ⎡ − 3 1 2 6 − 2 − 4 − 1 2 5 1 3 8 − 7 − 1 − 4 ⎦ ⎤
SOLUTION
先求 A A A 的列空間,將 A A A 化為階梯形。
A ∼ [ 1 − 2 0 − 1 3 0 0 1 2 − 2 0 0 0 0 0 ] A \sim
\begin{bmatrix} 1 & -2 & 0 & -1 & 3 \\ 0 & 0 & 1 & 2 & -2 \\ 0 & 0 & 0 & 0 & 0 \end{bmatrix}
A ∼ ⎣ ⎡ 1 0 0 − 2 0 0 0 1 0 − 1 2 0 3 − 2 0 ⎦ ⎤
A A A 有兩個主元,故 rank A = 2 \text{rank}A=2 rank A = 2 。
定義 矩陣 A A A 的零度 是 A A A 零空間的維度,記為 null A \text{null}A null A 。
例 求下列矩陣的零度:
A = [ − 3 6 − 1 1 − 7 1 − 2 2 3 − 1 2 − 4 5 8 − 4 ] A = \begin{bmatrix} -3 & 6 & -1 & 1 & -7 \\ 1 & -2 & 2 & 3 & -1 \\ 2 & -4 & 5 & 8 & -4 \end{bmatrix}
A = ⎣ ⎡ − 3 1 2 6 − 2 − 4 − 1 2 5 1 3 8 − 7 − 1 − 4 ⎦ ⎤
SOLUTION:
先解 A x ⃗ = 0 ⃗ A\vec{x}=\vec{0} A x = 0 ,即化解 [ A 0 ⃗ ] \begin{bmatrix} A & \vec{0} \end{bmatrix} [ A 0 ] ,有 [ A 0 ⃗ ] ∼ [ 1 − 2 0 − 1 3 0 0 0 1 2 − 2 0 0 0 0 0 0 0 ] \begin{bmatrix} A & \vec{0} \end{bmatrix} \sim \begin{bmatrix} 1 & -2 & 0 & -1 & 3 & 0 \\ 0 & 0 & 1 & 2 & -2 & 0 \\ 0 & 0 & 0 & 0 & 0 & 0 \end{bmatrix} [ A 0 ] ∼ ⎣ ⎡ 1 0 0 − 2 0 0 0 1 0 − 1 2 0 3 − 2 0 0 0 0 ⎦ ⎤ ,故:
[ x 1 x 2 x 3 x 4 x 5 ] = [ 2 x 2 + x 4 − 3 x 5 x 2 (free) − 2 x 4 + 2 x 5 x 4 (free) x 5 (free) ] = x 2 [ 2 1 0 0 0 ] + x 4 [ 1 0 − 2 1 0 ] + x 5 [ − 3 0 2 0 1 ] \begin{bmatrix}
&x_1&\\
&x_2&\\
&x_3&\\
&x_4&\\
&x_5&
\end{bmatrix}
=
\begin{bmatrix}
&2x_2+x_4-3x_5&\\
&x_2 \text{ (free)}&\\
&-2x_4+2x_5& \\
&x_4 \text{ (free)}&\\
&x_5 \text{ (free)}&
\end{bmatrix}
=
x_2\begin{bmatrix}&2&\\ &1&\\ &0&\\ &0&\\ &0& \end{bmatrix}+
x_4\begin{bmatrix}&1&\\ &0&\\ &-2&\\ &1& \\ &0& \end{bmatrix}+
x_5\begin{bmatrix}&-3&\\ &0&\\ &2&\\ &0&\\ &1& \end{bmatrix}
⎣ ⎢ ⎢ ⎢ ⎢ ⎡ x 1 x 2 x 3 x 4 x 5 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ = ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 2 x 2 + x 4 − 3 x 5 x 2 (free) − 2 x 4 + 2 x 5 x 4 (free) x 5 (free) ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ = x 2 ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 2 1 0 0 0 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ + x 4 ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 1 0 − 2 1 0 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ + x 5 ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ − 3 0 2 0 1 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤
前文論證過 { [ 2 1 0 0 0 ] , [ 1 0 − 2 1 0 ] , [ − 3 0 2 0 1 ] } \left\{ \begin{bmatrix}2\\ 1\\ 0\\ 0\\ 0 \end{bmatrix} , \begin{bmatrix}1\\ 0\\ -2\\ 1 \\ 0 \end{bmatrix}, \begin{bmatrix}-3\\ 0\\ 2\\ 0\\ 1 \end{bmatrix} \right\} ⎩ ⎪ ⎪ ⎪ ⎪ ⎨ ⎪ ⎪ ⎪ ⎪ ⎧ ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 2 1 0 0 0 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ , ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ 1 0 − 2 1 0 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ , ⎣ ⎢ ⎢ ⎢ ⎢ ⎡ − 3 0 2 0 1 ⎦ ⎥ ⎥ ⎥ ⎥ ⎤ ⎭ ⎪ ⎪ ⎪ ⎪ ⎬ ⎪ ⎪ ⎪ ⎪ ⎫ 為 A A A 零空間的一個基,故 nul A = 3 \text{nul} A=3 nul A = 3 。可見零度等於矩陣 A A A 非主元的個數。
秩-零化度定理
對於矩陣 A m × n A_{m\times n} A m × n :
rank A + null A = n \text{rank}A+\text{null}A=n
rank A + null A = n
因秩表示 A A A 主元的個數,零度表示 A A A 非主元的個數,加在一起即為 A A A 的列數。