답은 불연속 변수 또는 연속 랜덤 변수를 처리하는지 여부에 따라 다릅니다. 따라서 이에 따라 답변을 나누겠습니다. 나는 당신이 약간의 기술적 인 세부 사항을 원한다고 가정 할 것이고 반드시 영어로 설명 할 필요는 없습니다.
이산 랜덤 변수
불연속적인 가치를 지닌 확률 적 프로세스 (예 : 동전 10 회 던지기 결과, 10 분 내에 상점에 도착한 고객 수 등)가 있다고 가정하십시오. 이러한 경우, 기초 확률 론적 프로세스에 대해 적절한 가정을함으로써 특정 결과 집합을 관찰 할 확률을 계산할 수 있습니다 (예를 들어, 코인 랜딩 헤드의 확률은 이고 코인 토스는 독립적입니다).피
와 확률 프로세스를 로 설명하는 매개 변수 세트로 관찰 된 결과를 나타냅니다 . 따라서 확률에 대해 이야기 할 때 를 계산하려고합니다 . 즉, 특정 값을 소정 , 우리로 나타낸 결과를 관찰 할 확률 .영형θP(O|θ)θP(O|θ)O
그러나 실제 확률 론적 과정을 모델링 할 때 종종 알지 못합니다 . 우리는 단순히 를 관찰 하고 목표 는 관찰 된 결과 감안할 때 그럴듯한 선택이 될 의 추정치에 도달 하는 것 입니다. 값이 주어지면 를 관찰 할 확률 은 입니다. 따라서 '자연스러운'추정 과정은 실제로 관측 할 확률을 최대화 할 수있는 값을 선택하는 것 입니다. 다시 말해, 다음 함수를 최대화하는 매개 변수 값 를 찾습니다 .θOθOθOP(O|θ)θOθ
L(θ|O)=P(O|θ)
L(θ|O) 를 우도 함수라고합니다. 정의에 따라 우도 함수는 관측 된 에 따라 결정되며 알 수없는 매개 변수 의 함수입니다 .Oθ
연속 랜덤 변수
연속적인 경우 상황은 한 가지 중요한 차이점과 유사합니다. 연속적인 경우 이므로 주어진 를 관측 할 확률에 대해 더 이상 이야기 할 수 없습니다 . 기술을 익히지 않고 기본 아이디어는 다음과 같습니다.OθP(O|θ)=0
결과물의과 연관된 확률 밀도 함수 (PDF) 넣어야 :로서 . 따라서, 우리는 추정치 연속 경우 소정의 관찰 결과 다음과 같은 기능을 극대화 :Of(O|θ)θO
L(θ|O)=f(O|θ)
이 상황 에서 관찰 된 결과 와 연관된 PDF를 최대화 할 때 를 관찰 할 확률을 최대화하는 매개 변수 값을 찾는다고 기술적으로 주장 할 수 없습니다 .OO