·취업
컴퓨터 비전 면접 준비 - 선형 대수 & 확률 통계 1. Entropy, Cross Entropy loss란?Entropy는 확률 변수와 관련된 불확실성, 각 사건의 평균 정보량을 측정합니다. Entropy가 높다는 것은 불확실성이 높다는 뜻입니다. Cross Entropy는 데이터의 확률 분포를 $ P(x) $, 모델이 추정하는 확률 분포를 $Q(x)$라 할 때, 두 확률 분포 $P$와 $Q$의 차이를 측정하는 지표입니다.2. KL-divergence란?두 확률 분포 $P$, $Q$ 가 있을 때, $P$에 근사하기 위한 $Q$ 분포를 통해 샘플링할 때 발생하는 정보량의 손실을 의미합니다.3. Gaussian Distribution이란?정규분포라고도 하며 평균을 중심으로 대칭인 확률 분포입니다. 대..