Interactive linear algebra

Moore-Penrose 伪逆

A+b 看成两个几何动作:先把 b 投影到 A 的列空间,再在所有能映到这个投影的 x 中挑一个长度最短的。

x* = A+b 最小化 ||Ax-b||,并在并列解中最小化 ||x||。另见 角色向量 r / 对偶基 u 看板

输入空间 x

x* 是唯一解

输出空间 Ax

b 位于列空间内

伪逆在做什么?

A A+bb 在列空间上的正交投影
A+A xx 在行空间上的正交投影
r = b - A A+b残差垂直于列空间