Zzong's Notes

orthogonal

1 min read

Orthogonal

A.1) Orthogonal (직교) Vector

두 vector 간 내적 (dot product) 값이 () 일 때, 두 벡터가 직교한다 고 말한다.

만약 두 벡터가 서로 non-zero norm 값을 가진다면, 이는 두 벡터 사이의 값이 90 도를 가짐을 의미한다.

A.2) Orthogonal Matrix (직교 행렬)

크기 행렬 가 존재할 경우, 를 만족하는 행렬을 orthogonal matrix 라고 한다. 즉, 의 각 벡터가 orthonormal 한 column (또는 row) vector 로 구성되었다고 볼 수 있다.

역행렬의 정의를 생각해봤을 때, orthogonal matrix 의 transpose matrix 는 Inverse matrix 를 의미한다. 즉, 를 만족한다.

B) Related

orthonormal

C) Related

D) References

링크된 언급

6
basis

...이다. 그렇지 않을 경우, original vector 를 basis 로 써야 한다 (refer). B) Orthonormal Basis 만약 기저 벡터가 unit vector 면서 서로 orthogonal 이라면, 이러한 기저 벡터를 orthonormal(정규직교) basis vector 라고 부른다. 아래 그림은 정규직교 기저 벡터 \boldsymbol{k}, \boldsymbol{i},...

One Hot Encoding

... 1) [‘apple’, ‘dog’, ‘cat’] = [[0, 0, 1], [0, 1, 0], [1, 0, 0]] 예 2, Word Representation) 이렇게 하면 모든 데이터가 orthogonal vector space 에 존재하는 vector 들로 표현된다. B) 특징 B.1) 장점 데이터 간 관계성을 없앰으로써, Label Encoding 의 단점을 해결한다. B.2) 단점 h...

ordinary least squares

...bf{X}\boldsymbol{w}=\mathbf{X}^{\top}\boldsymbol{y} 최적의 솔루션은 y \mathrm{X}w 이 \mathbf{X} 의 범위에 대해 normal (orthogonal) 한 것이다. 즉, \hat{\boldsymbol{w}} 에 대한 solution OLS 는 아래와 같다. \hat{\boldsymbol{w}}=\left(\mathbf{X}^{\top}...

orthonormal

...{b} {j} 가 orthonormal (정규 직교) 할 경우, 다음을 만족한다. i\neq j and \boldsymbol{b} {i}^{\top}\boldsymbol{b} {j}=0 (orthogonal) i=j and \boldsymbol{b} {i}^{\top}\boldsymbol{b} {j}=1 ( unit norm ) Orthonormal Matrix orthonormal matr...

Singular Value Decomposition

...ion, SVD) 는 m\times n 행렬 A 를 다음과 같이 3 개의 행렬 곱으로 분해하는 방법을 의미한다. A=U\ \Sigma \ V^{\mathrm{T}} U: m\times m orthogonal matrix 로, A A^{\top} 을 eigen decomposition 하여 얻은 직교 행렬을 의미한다. \Sigma: m\times n diagonal matrix 로, 각 행렬의...

support vector machine

...perplane 에 존재하는 두 examples \boldsymbol{x} {a} and \boldsymbol{x} {b} 에 대해, 두 사이의 벡터가 \boldsymbol{w} 에 대해 orthogonal 함을 보이는 \boldsymbol{w} 를 선택하면 된다. 예를 들어 다음과 같은 식을 고려해보면, \begin{aligned} f\left(\boldsymbol{x} {a}\right)...