통계 및 빅 데이터

R의 다단계 모델을 사용하여 복잡한 측량 데이터를 분석하는 방법에 대한 조언을 찾고 있습니다. survey패키지를 단일 수준 모델에서 선택의 비 균등 한 확률로 가중치를 사용 했지만이 패키지에는 다단계 모델링 기능이 없습니다. 이 lme4패키지는 다단계 모델링에는 적합하지만 다른 수준의 클러스터링에 가중치를 포함시키는 방법은 없습니다. Asparouhov (2006) 는 문제를 설정합니다. 다단계 모델은 클러스터 …

11 r  mixed-model  weighted-sampling  cluster-sample 

GLM에서 스칼라 가정 및 PDF와 하부 분배 이 도시 될 수 . 링크 함수 가 다음을 만족하는 경우 여기서 는 선형 예측 변수이며 는 이것을 정식 링크 함수라고합니다. 모델.YYYθθ\thetafY(y|θ,τ)=h(y,τ)exp(θy−A(θ)d(τ))fY(y|θ,τ)=h(y,τ)exp⁡(θy−A(θ)d(τ))f_Y(y | \theta, \tau) = h(y,\tau) \exp{\left(\frac{\theta y - A(\theta)}{d(\tau)} \right)}μ=E(Y)=A′(θ)μ=E⁡(Y)=A′(θ) \mu = \operatorname{E}(Y) = A'(\theta)g(⋅)g(⋅)g(\cdot)g(μ)=θ=X′βg(μ)=θ=X′βg(\mu)=\theta = X'\beta X′βX′βX'\betag(⋅)g(⋅)g(\cdot) 내 질문은, 정규 …

11 generalized-linear-model  exponential-family 

가정이 독립적이다.X i ∼ N ( 0 , σ 2 )X=X1+X2+⋯+XnX=X1+X2+⋯+Xn X = X_1 + X_2+\cdots+ X_n Xi∼N(0,σ2)Xi∼N(0,σ2)X_i \sim N(0,\sigma^2) 내 질문은, 어떤 배포판이 Z=X2X21+X22+⋯+X2nZ=X2X12+X22+⋯+Xn2 Z = \frac{X^2}{X_1^2 + X_2^2 + \cdots + X_n^2} 따르다? 여기서 로 표현 된 두 카이 제곱 랜덤 변수의 비율이 베타 분포를 따른다는 것을 알고 …

11 normal-distribution  chi-squared  beta-distribution  ratio 

두 개의 입력 x 선 이미지 사이의 유사성 메트릭을 계산하는 분류 문제를 연구 중입니다. 이미지가 동일한 인물 인 경우 ( '오른쪽 레이블') 더 높은 메트릭이 계산됩니다. 서로 다른 두 사람의 입력 이미지 ( '잘못된'라벨)는 측정 항목이 낮아집니다. 분류 오류 10 배 교차 검증을 사용하여 오 분류 확률을 계산했습니다. 현재 샘플 …

11 classification  confidence-interval  cross-validation  matlab 

marginal model 과 random-effects model 에 대한 정보 와 그 중에서 선택하는 방법을 찾을 때 일부 정보를 찾았지만 수학적 추상 설명 (예 : https : //stats.stackexchange .com / a / 68753 / 38080 ). 어딘가 에서이 두 가지 방법 / 모델 ( http://www.biomedcentral.com/1471-2288/2/15/ ) 사이의 매개 변수 추정치 사이에 실질적인 …

11 mixed-model  random-effects-model  glmm  gee  marginal-model 

나는 Franklin M. Fisher의 Econometrics에서 식별 문제 책을 읽었 으며 가능성 함수를 시각화하여 식별을 시연한다는 부분에 혼란 스러웠다. 문제는 다음과 같이 단순화 될 수 있습니다. 회귀의 경우 , 여기서 u ∼ i 입니다. 나는 . d . N ( 0 , σ 2 I를 ) , 및 b는 변수이다. Y …

11 mathematical-statistics  maximum-likelihood  geometry 

저는 대학에서 ML을하고 있는데 교수는 기대 (E)라는 용어를 언급하면서 가우시안 프로세스에 대해 몇 가지를 설명하려고했습니다. 그러나 그가 설명한 방식에서 나는 E가 평균 μ와 같다는 것을 이해했습니다. 내가 제대로 이해 했습니까? 동일하면 두 기호가 모두 사용되는 이유를 알고 있습니까? 또한 E가 E ( ) 와 같은 함수로 사용될 수 있음을 보았지만 …

11 machine-learning  gaussian-process  linear-algebra 

이항 분포는 베타 분포와 형태가 매우 유사하며 두 PDF 중 하나에서 상수를 다시 매개 변수화하여 동일하게 보이도록 할 수 있습니다. 그렇다면 왜 베타 배포판이 필요한가요? 특정 목적을위한 것입니까? 감사!

11 bayesian  mathematical-statistics  binomial  beta-distribution 

시료 경로에서 광범위하게 정지 된 확률 적 공정의 발화를 어떻게 확인합니까? 단일 시료 경로에서 에르고 디 시티를 확인할 수 있습니까? 아니면 여러 샘플 경로가 필요합니까? ergodicity를 확인하는 동기 중 하나는 시계열에서 시간에 따른 표본 경로의 평균을 모집단 평균의 추정치로 안전하게 사용할 수 있다는 것입니다.

11 time-series  ergodic 

감독되는 기계 학습 분류 알고리즘의 성능을 평가하려고합니다. 관찰은 99 명의 피험자 집단으로부터 도출 된 명목 클래스 (당분간 2 개, 그러나이를 멀티 클래스 문제로 일반화하고 싶습니다)로 분류됩니다. 내가 대답 할 수있는 질문 중 하나는 알고리즘이 입력 클래스 간의 분류 정확도에 큰 차이가있는 경우입니다. 이진 분류 사례의 경우 (기본 분포가 비정규이기 때문에) …

11 r  hypothesis-testing  nonparametric 

그래프의 모듈성은 Wikipedia 페이지 에서 정의됩니다 . A의 다른 포스트 누군가는 인접성 매트릭스 때문 모듈화 쉽게 가중 네트워크를 계산 (최대화 할 수있다)를 설명 뿐만 값의 관계를 포함 할 수있다. 그러나 이것이 예를 들어 -10에서 +10 사이의 서명 된 가치있는 가장자리에서도 작동하는지 알고 싶습니다. 이 문제에 대한 직관, 증거 또는 참조를 …

11 clustering  data-visualization  networks  partitioning  modularity 

평균 및 공분산 행렬 갖는 이변 량 정규 분포는 반지름 r 및 각도 \ theta의 극좌표 로 다시 쓸 수 있습니다 . 내 질문은 : 샘플 공분산 행렬 S가 주어 졌을 때 \ hat {r} 의 샘플링 분포 , 즉 점 x 에서 추정 된 중심 \ bar {x} 까지의 …

11 probability  normal-distribution  multivariate-analysis  rayleigh 

EM 알고리즘 에 관한 매우 유용한 튜토리얼을 찾았습니다 . 튜토리얼의 예제와 그림은 단순히 훌륭합니다. 확률 계산에 대한 관련 질문 기대 최대화가 어떻게 작동합니까? 튜토리얼에 설명 된 이론을 예제에 연결하는 방법에 관한 또 다른 질문이 있습니다. 전자 단계에서, EM 함수를 선택 그 하한은 로그 P ( X , Θ ) 도처하고있는 …

11 machine-learning  clustering  algorithms  natural-language 

온 위키 문서 라플라스 평활화 (또는 첨가제 평)의 특징이되는 볼 베이지안 점에서, 이는 사전에 모수 를 갖는 대칭 Dirichlet 분포를 사용하여 사후 분포의 예상 값에 해당합니다 .αα\alpha 나는 그것이 실제로 어떻게 사실인지 의아해합니다. 누군가 그 두 가지가 어떻게 동등한 지 이해하도록 도울 수 있습니까? 감사!

11 bayesian  smoothing  dirichlet-distribution  laplace-smoothing 

(1)에서 많은 책과 논문을 읽었던 Chris Chatfield는 다음과 같은 조언을합니다. 예를 들어, AIC 값이 낮거나 대략 동일한 ARIMA 시계열 모델 중에서 선택해야합니다. 이는 최소 AIC를 제공하는 것이 아니라 가장 최근 연도 데이터를 가장 잘 예측하는 것입니다. 그러한 조언의 근거는 무엇입니까? 소리가 좋은 경우, predict :: auto.arima 및 기타 예측 루틴이 …

11 forecasting  model-selection  arima  aic