Matrix

Definition

행렬(Matrix)은 수를 행과 열로 배열한 구조다.

행렬은 여러 벡터를 한 번에 변환하거나, 데이터와 파라미터를 묶어 계산하는 표 형식의 도구다.

A \in R^{m \times n}

은 $m$ 개의 행과 $n$ 개의 열을 가진 행렬을 뜻한다.

신경망의 한 층은 입력 행렬에 가중치 행렬을 곱해 새로운 표현을 계산한다.

가중치, 이미지, 배치 데이터, 어텐션 점수 등 대부분의 딥러닝 데이터가 행렬 또는 고차원 텐서로 다뤄진다.