통계 및 빅 데이터

수학적 통계와 통계의 차이점은 무엇입니까? 본인은했습니다 이 : 통계는 데이터의 수집, 구성, 분석 및 해석에 대한 연구입니다. 설문 조사 및 실험 설계 측면에서 데이터 수집 계획을 포함하여 모든 측면을 처리합니다. 그리고 이것은 : 수학적 통계는 확률 이론과 선형 대수 및 분석과 같은 다른 수학 분기를 사용하여 수학적 관점에서 통계를 연구합니다. …

24 mathematical-statistics  terminology 

선형 회귀 분석에서 특이 치를 분석하고 다중 공선 성을 조사하며 이분산성을 테스트합니다. 문제는 이것들을 적용하는 명령이 있습니까? 먼저 특이 치를 먼저 분석 한 다음 다중 공선 성을 조사해야합니까? 아니면 반대로? 이것에 대한 경험 규칙이 있습니까?

24 regression  multiple-regression  outliers 

정확히 같은 크기의 두 시계열 간의 상관 관계를 계산하는 가장 쉬운 방법 / 방법은 무엇입니까? 나는 와 곱하고 곱셈을 더하는 것을 생각했습니다. 이 단일 숫자가 양수라면이 두 계열이 서로 연관되어 있다고 말할 수 있습니까? 그러나 선형 적으로 다른 지수로 증가하는 시계열이 서로 관련이없는 몇 가지 예를 생각할 수 있지만 위의 …

24 time-series 

다음과 같은 생물학적 실험이있는 논문을 검토하고 있습니다. 장치는 다양한 양의 유체 전단 응력에 세포를 노출시키는 데 사용됩니다. 더 큰 전단 응력이 셀에 가해 짐에 따라 더 많은 전단 응력이 기판에서 분리되기 시작합니다. 전단 응력의 각 수준에서, 그들은 부착 된 상태로 남아있는 세포를 세고, 처음에 부착 된 총 세포 수를 알기 …

24 r  logistic  multinomial 

약물 이름 (DN)과 이에 해당하는 이상 반응 (AE)이라는 두 가지 변수가 있는데, 이는 다 대다 관계에 있습니다. 33,556 개의 약물 이름과 9,516 개의 부작용이 있습니다. 표본 크기는 약 580 만 개의 관측치입니다. DN과 AE의 연관성 / 관계를 연구하고 이해하고 싶습니다. 그림을 보는 것이 더 낫기 때문에 R 에서이 세트를 시각화하는 …

24 r  categorical-data  data-visualization  large-data  association-measure 

그래서 나는 어느 중앙 측정치 L1 (즉, 올가미)와 L2 (즉, 능선 회귀)가 추정되는지에 대한 질문을 받았다. 답은 L1 = 중간 값이고 L2 = 평균입니다. 이것에 대한 직관적 인 추론이 있습니까? 아니면 대수적으로 결정해야합니까? 그렇다면 어떻게해야합니까?

24 lasso  regularization  loss-functions  ridge-regression 

k-fold cross-validation이 도입 된 논문에 대한 참조를 찾고 있습니다 (주제에 대한 좋은 학문적 참조가 아니라). 아마도 첫 번째 논문을 모호하지 않게 식별하기에는 시간이 너무 많이 걸리기 때문에 아이디어가 사용 된 초기 논문이 흥미로울 것입니다. 내가 아는 가장 빠른 것은 PA Lachenbruch 및 MR Mickey,“차별 분석에서의 오류율 추정”, Technometrics, vol. 10 …

24 cross-validation  references 

미국의 17 년 (1995 년에서 2011 년까지) 자살 사망 관련 사망 증명서 데이터를 보유하고 있습니다. 검토 한 결과, 사용 된 방법이나 결과에 대한 확신이 명확하지 않습니다. 따라서 데이터 세트 내에서 특정 달에 자살이 발생할 가능성이 있는지 여부를 확인할 수 있습니다. 모든 분석은 R에서 수행됩니다. 데이터의 총 자살 건수는 13,909 명입니다. …

24 r  chi-squared  arima  count-data  seasonality 

많은 임상 연구는 비임의 샘플을 기반으로합니다. 그러나 대부분의 표준 검정 (예 : t- 검정, 분산 분석, 선형 회귀, 로지스틱 회귀)은 표본에 "임의의 숫자"가 포함되어 있다는 가정을 기반으로합니다. 이러한 비 랜덤 샘플이 표준 테스트로 분석 된 경우 결과가 유효합니까? 고맙습니다.

24 sampling  randomness 

두 샘플의 중앙값을 비교하기 위해 순위 합계 테스트를 사용하고 있으며 ( ) 다음과 크게 다릅니다 . 이러한 작은 값 이 의심 스럽거나 매우 큰 표본을 갖는 것과 관련된 높은 통계적 힘에 기인해야합니까? 의심스럽게 낮은 값 과 같은 것이 있습니까?p pn = 120000엔=120000n=120000p = 1.12E-207피피p피피p

24 hypothesis-testing  p-value  sample-size  power 

나는 현재 우리 모두처럼 출력 가 입력 와 어떻게 관련되어 있는지 이해하기 위해 기본적으로 필요한 프로젝트에 있습니다. 여기서의 특이점은 데이터 가 한 번에 하나씩 제공되므로 새로운 받을 때마다 분석을 업데이트하고 싶습니다 . 필자는 필요한 모든 데이터를 보유하고 동시에 모든 데이터를 사용하여 계산을 수행하는 "배치"처리와 달리 "온라인"처리라고합니다.yyyxxx(y,x)(y,x)(y,x)(y,x)(y,x)(y,x) 그래서 나는 아이디어를 둘러 …

24 modeling  model-selection 

처음에는 순서가 중요하지 않다고 생각했지만 여러 회귀 계수를 계산하는 그램 슈미트 직교 화 프로세스에 대해 읽었으며 이제는 두 번째 생각을하고 있습니다. 그램-슈미트 공정에 따르면, 설명 변수가 다른 변수들 사이에서 색인화 될 때, 그 잔여 벡터는 더 작을 수 있는데, 그 이유는 이전 변수의 잔여 벡터가 그로부터 제거되기 때문이다. 결과적으로, 설명 …

24 regression  multiple-regression  regression-coefficients 

일부 데이터의 Quantile을 추정하고 싶습니다. 데이터가 너무 커서 메모리에 수용 할 수 없습니다. 그리고 데이터는 정적 인 것이 아니며 새로운 데이터가 계속 나오고 있습니다. 누구든지 매우 제한된 메모리 및 계산으로 지금까지 관찰 된 데이터의 Quantile을 모니터링하는 알고리즘을 알고 있습니까? 내가 찾을 수 P2 알고리즘 유용하지만, 매우 꼬리 무거운 분산되어 내 …

24 algorithms  quantiles 

New York Times는 뉴욕시 교육자들에게 피드백을 제공하기 위해 사용되는 '부가가치'교사 평가 시스템에 대해 오랫동안 언급했습니다. lede는 문맥없이 표시되는 점수를 계산하는 데 사용되는 방정식입니다. 수사적 전략은 수학을 통해 협박하는 것으로 보입니다. 이 기사의 전문은 http://www.nytimes.com/2011/03/07/education/07winerip.html 에서 볼 수 있습니다 . 마이클 와인 립 (Michael Winerip)이라는 저자는이 방정식의 의미가 평균적인 교사보다 훨씬 …

24 regression  multilevel-analysis  statistics-in-media 

ez패키지 사용에서 lme반복 측정 ANOVA 로 이동하려고합니다 (와 함께 사용자 정의 대비를 사용할 수 있기를 바랍니다 lme). 이 블로그 게시물 의 조언에 따라 aov( ez요청시 와 마찬가지로 ) 및을 사용하여 동일한 모델을 설정할 수있었습니다 lme. 그러나 그 게시물에 주어진 예 에서 F 값 은 ( aov와 lme내가 확인한 것) 사이에 …

24 r  anova  mixed-model  repeated-measures  lme4-nlme