가우스 혼합 모형에 대한 다른 공분산 유형


13

여기서 가우스 혼합 모델을 시도하는 동안 이 4 가지 공분산 유형을 찾았습니다.

'full' (each component has its own general covariance matrix),
'tied' (all components share the same general covariance matrix),
'diag' (each component has its own diagonal covariance matrix),
'spherical' (each component has its own single variance).

나는 각 유형에 대한 자세한 내용을 찾기 위해 많은 구글을 ​​검색했지만 매우 높은 수준의 설명 (예 : this ) 만 발견했습니다.

누군가 내가 이것을 이해하도록 도울 수 있는지 또는 적어도 내가 이것에 대해 읽을 수있는 곳으로 안내해 줄 수 있는지 감사하십시오.

답변:


17

가우스 분포는 공분산 행렬과 그 평균 (공간의 위치)에 의해 완전히 결정됩니다. 가우스 분포의 공분산 행렬은 밀도 등고선 축의 방향과 길이를 결정하며 모두 타원체입니다.

(0,0)(4,5)3/52/5

그림

이미지를 클릭하면 더 높은 해상도의 버전이 표시됩니다.

NB 개별 성분이 아닌 실제 혼합물의 도표입니다. 구성 요소가 잘 분리되어 있고 무게가 비슷하기 때문에 혼합 윤곽은 구성 요소 윤곽과 매우 유사합니다 (예를 들어 "연결된"그림의 중앙에 표시된 것처럼 왜곡되거나 병합 될 수있는 낮은 수준은 제외).

  • 전체 는 구성 요소가 임의의 위치와 모양을 독립적으로 채택 할 수 있음을 의미합니다.

  • 묶음 은 모양이 같지만 모양이 무엇이든 의미합니다.

  • 대각선 은 형상 축이 좌표 축을 따라 방향이 지정되어 있지만 편심이 구성 요소마다 다를 수 있음을 의미합니다.

  • Tied Diagonal 은 등고선 축이 좌표축을 따라 향하는 "결합 된"상황입니다. (처음에 "대각선"을 잘못 해석했기 때문에 이것을 추가했습니다.)

  • 구형 은 원형 윤곽이있는 "대각선"상황입니다 (이름이 높을수록 더 큰 치수의 구형).

nn(n+1)/2


좋은 대답입니다. 감사합니다. 마지막 질문입니다. 이것들이 유일한 4 가지 유형입니까? 아니면 다른 유형도 있습니까?
Bee

1
1

감사. 방금 내 게시물에 인용 된 설명과 답변을 비교했습니다. 내에서 '묶어 놓기'는 모든 구성 요소가 공유하는 유일한 것입니다. 그러나 귀하의 '전체'는 각 구성 요소가 공유하지 않는 유일한 것으로 보입니다. 나는이 두 가지가 모순되는 것처럼 느낍니다. (내가 무언가를 놓치고 있다고 확신한다). 설명 해주실 래요? 고마워
Bee

나는 모순을 보지 못한다 : 나는 당신이 묘사 한 조건들을 정확하게 표현했다. 실제로, 나는 이러한 이미지를 만들기 위해 다른 소스를 언급하지 않았습니다.
whuber

1
고마워요. 무슨 말인지 알 겠어요. 이를 반영하여 설명을 업데이트하겠습니다.
whuber
당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.