통계 및 빅 데이터

다음 분포에서 어떻게 효율적으로 샘플링해야합니까? x∼B(α,β), x>k엑스∼비(α,β), 엑스>케이 x \sim B(\alpha, \beta),\space x > k 경우 너무 크지도 않고 다음 거부 샘플링은 가장 좋은 방법이 될 수 있지만, 나는 확실하지 때 진행 방법입니다 크다. 아마도 적용 할 수있는 점근 적 근사가 있습니까?kk케이kk케이k

10 random-generation  beta-distribution  truncation 

두 그룹 사이에서 샘플을 분류하는 임의의 포리스트 기능을 테스트하려고합니다. 분류에 사용되는 54 개의 샘플과 다양한 변수가 있습니다. 내가 5 만 그루의 나무를 사용하는 경우에도 가방 외부 (OOB) 추정치가 서로 5 % 정도 차이가 나는 이유가 궁금합니다. 이것이 부트 스트랩이 도움이 될 수있는 것입니까?

10 machine-learning  random-forest 

a와 b가 실수 인 [a, b]의 연속 함수가 가우시안 프로세스 (회귀)에 의해 함수 (일부 표준)에 근접하거나 임의로 근접 할 수 있습니까?

10 gaussian-process  approximation 

제지 공장의 성능을 예측하기 위해 RF 회귀를 사용하려고합니다. 나는 기계 (종이 생산, 기계가 끌어 낸 전력)의 성능뿐만 아니라 입력 (속도 및 목재 펄프의 양 등 ...)에 대한 분 단위 데이터를 가지고 있으며 10 분을 예측하려고합니다. 성능 변수에 앞서. 12 개월의 데이터를 얻었으므로 훈련 세트의 경우 11 개월과 테스트의 마지막 달로 …

10 time-series  forecasting  cross-validation  random-forest  autoregressive 

과제 달성률을 논의 할 때 20 회 시도 중 0 회가 10 회 시도 중 0 회보다 "나쁘다"는 것을 보여주는 방법이 있습니까?

10 probability  sampling 

Tensorflow mnist 튜토리얼 ( https://github.com/tensorflow/tensorflow/blob/master/tensorflow/examples/tutorials/mnist/mnist_softmax.py )을 따르고 있습니다 . 튜토리얼은 tf.train.Optimizer.minimize(특히 tf.train.GradientDescentOptimizer)를 사용합니다 . 그라디언트를 정의하기 위해 인수가 전달되는 곳이 없습니다. 텐서 흐름은 기본적으로 수치 미분을 사용합니까? 당신이 할 수있는 것처럼 그라디언트를 전달하는 방법이 scipy.optimize.minimize있습니까?

10 python  optimization  tensorflow 

테스트 중심 개발을 프로그래밍하고 수행합니다. 코드를 변경 한 후 테스트를 실행합니다. 때때로 그들은 성공하고 때로는 실패합니다. 테스트를 실행하기 전에 테스트가 성공할 것이라는 신뢰를 위해 0.01에서 0.99 사이의 숫자를 기록합니다. 테스트의 성공 여부를 예측하는 데있어 개선되고 있는지 알고 싶습니다. 테스트가 월요일 또는 금요일에 성공할지 예측하는 것이 더 나은지 여부를 추적 할 …

10 forecasting  decision-theory  calibration  scoring-rules 

나는 여기 에서 보통 최소 제곱에 대한이 표기법을 보았다 . minw∥Xw−y∥22minw‖Xw−y‖22 \min_w \left\| Xw - y \right\|^2_2 나는 바닥에 이중 막대와 2를 본 적이 없다. 이 기호는 무엇을 의미합니까? 그들은 그들에게 특정한 용어를 가지고 있습니까?

10 regression  least-squares  linear-model  linear-algebra  notation 

약간의 토론 (아래) 후에, 나는 집중된 질문에 대한 명확한 그림을 얻었습니다. 따라서 수정 된 질문이 있습니다. 그러나 일부 의견은 원래 질문과 관련이없는 것처럼 보일 수 있습니다. 것으로 보인다 t-테스트가 대칭 분포를 신속하게 수렴 것으로, 서명 순위 테스트가 대칭을 가정 하고, 즉, 대칭 배포 수단 / pseudomedians / 중간 값 사이에는 …

10 hypothesis-testing  t-test  paired-data  wilcoxon-signed-rank  sign-test 

이미지 인식을 위해 컨볼 루션 네트워크를 만들고 있는데 크기가 다른 이미지를 입력 할 수 있는지 궁금합니다. 이 프로젝트에서 : https://github.com/harvardnlp/im2markup 그들은 말합니다 : and group images of similar sizes to facilitate batching 따라서 전처리 후에도 이미지의 크기는 여전히 다르므로 수식의 일부를 잘라 내지 않기 때문에 의미가 있습니다. 다른 크기를 사용하는 …

10 neural-networks  conv-neural-network  computer-vision 

Andrew Ng의 기계 학습 과정에서 그는 다음 공식을 사용합니다. ∇Atr(ABATC)=CAB+CTABT∇ㅏ티아르 자형(ㅏ비ㅏ티씨)=씨ㅏ비+씨티ㅏ비티\nabla_A tr(ABA^TC) = CAB + C^TAB^T 그는 다음과 같이 빠른 증거를 수행합니다. ∇Atr(ABATC)=∇Atr(f(A)ATC)=∇∘tr(f(∘)ATC)+∇∘tr(f(A)∘TC)=(ATC)Tf′(∘)+(∇∘Ttr(f(A)∘TC)T=CTABT+(∇∘Ttr(∘T)Cf(A))T=CTABT+((Cf(A))T)T=CTABT+CAB∇ㅏ티아르 자형(ㅏ비ㅏ티씨)=∇ㅏ티아르 자형(에프(ㅏ)ㅏ티씨)=∇∘티아르 자형(에프(∘)ㅏ티씨)+∇∘티아르 자형(에프(ㅏ)∘티씨)=(ㅏ티씨)티에프'(∘)+(∇∘티티아르 자형(에프(ㅏ)∘티씨)티=씨티ㅏ비티+(∇∘티티아르 자형(∘티)씨에프(ㅏ))티=씨티ㅏ비티+((씨에프(ㅏ))티)티=씨티ㅏ비티+씨ㅏ비\nabla_A tr(ABA^TC) \\ = \nabla_A tr(f(A)A^TC) \\ = \nabla_{\circ} tr(f(\circ)A^TC) + \nabla_{\circ}tr(f(A)\circ^T C)\\ =(A^TC)^Tf'(\circ) + (\nabla_{\circ^T}tr(f(A)\circ^T C)^T \\ = C^TAB^T + (\nabla_{\circ^T}tr(\circ^T)Cf(A))^T …

10 machine-learning  matrix  derivative 

주문한 상품 목록이 있다고 가정 해보십시오. [a, b, c, ... x, y, z, ...] 위의 목록을 지원하여 일부 매개 변수 alpha가 적용되는 배포 제품군을 찾고 있습니다. alpha = 0의 경우 확률 1 을 첫 번째 항목에, 위를, 0을 나머지에 할당합니다 . 즉, 우리 가이 목록에서 샘플을 교체하면 항상을 얻습니다 a. …

10 distributions  sampling  discrete-data 

다음 다중 회귀 모델을 고려하십시오.Y=Xβ+Zδ+U.(1)(1)Y=Xβ+Zδ+U.Y=X\beta+Z\delta+U.\tag{1} 여기서 는 열 벡터이며; 행렬; a column vector; 행렬; 열 벡터; 그리고 오류 항인 는 열 벡터입니다.YYYn×1n×1n\times 1XXXn×(k+1)n×(k+1)n\times (k+1)ββ\beta(k+1)×1(k+1)×1(k+1)\times 1ZZZn×ln×ln\times lδδ\deltal×1l×1l\times 1UUUn×1n×1n\times1 질문 제 강사, Econometrics 소개 교과서 제 3 판. James H. Stock 및 Mark W. Watson, p. 281 및 계량 경제학 : Honor …

10 regression  multiple-regression  econometrics  least-squares  nonlinear-regression 

데이터 포인트의 집계입니까? 아니면 다른 변수의 값으로 정렬 된 표 형식으로 다른 요소에 대한 데이터 요소를 표시합니까? 원시 데이터와 어떻게 다릅니 까?

10 dataset  terminology  definition 

[A 비슷한 질문은 질문했다 여기에 아무 답변] 나는 L1 정규화 (Lasso logistic regression) 로 로지스틱 회귀 모델을 적합 시켰고 유의성에 대한 적합 계수를 테스트하고 p- 값을 얻고 싶습니다. 나는 Wald의 검정 (예를 들어)이 정규화없이 전체 회귀에서 개별 계수의 중요성을 검정하는 옵션이라는 것을 알고 있지만 Lasso에서는 일반적인 Wald 공식을 적용 할 …

10 logistic  statistical-significance  regression-coefficients  lasso