통계 및 빅 데이터

1

대규모 교육 데이터 세트를 사용하는 다중 클래스 텍스트 분류 문제에 대해 2 개의 다른 분류기를 비교하고 싶습니다. ROC 곡선을 사용해야하는지 아니면 학습 곡선을 사용하여 두 분류기를 비교해야하는지 궁금합니다. 한편, 학습 곡선은 분류 기가 학습을 중단하고 저하 될 수있는 데이터 세트의 크기를 찾을 수 있기 때문에 학습 데이터 세트의 크기를 결정하는 …

11 machine-learning classification roc accuracy

3

2D 정사각형에서 점 분포의 균일 성을 측정

2D 사각형이 있고 그 안에 1000 점과 같은 점이 있습니다. 정사각형 내부의 점 분포가 넓게 분포되어 있는지 (또는 다소 균일하게 분포되어 있는지) 정사각형 내부의 일부 지점에서 함께 모이는 경향이 있는지 확인할 방법이 필요합니다. 이것을 결정하기 위해 수학 / 통계 (프로그래밍이 아닌) 방법이 필요합니다. 나는 구글 검색, 적합도, Kolmogorov 등과 같은 …

11 distributions probability spatial point-process

2

로지스틱 회귀 분석을위한 연속 변수 변환

큰 설문 조사 데이터, 이진 결과 변수 및 이진 및 연속을 포함한 많은 설명 변수가 있습니다. 모델 세트를 구축하고 (GLM과 혼합 GLM을 모두 사용하여 실험) 정보 이론적 접근 방식을 사용하여 최상위 모델을 선택합니다. 상관 관계에 대한 설명 (연속적 및 범주 적)에 대한 설명을주의 깊게 검사했으며 피어슨 또는 피 코르 계수가 …

11 regression logistic data-transformation skewness

3

값이 0 인 고조파 평균

고조파는 어떻게 제로 값을 처리합니까? 의 조화 평균이 {3, 4, 5, 0} 때문에 어떤 것이 ?1 / 0 = ∞1/0=∞1/0=\infty

11 mean average harmonic-mean

1

로그 코시 난수 생성

밀도가있는 로그-코치 분포에서 난수를 그려야합니다. 누구든지 나를 도울 수 있거나 방법을 보여줄 수있는 책 / 종이를 가리킬 수 있습니까?f(x;μ,σ)=1xπσ[1+(ln(x)−μσ)2].f(x;μ,σ)=1xπσ[1+(ln(x)−μσ)2].f(x;\mu,\sigma)=\frac{1}{x\pi\sigma\left[1+\left(\frac{ln(x)-\mu}{\sigma}\right)^2\right]}.

11 distributions random-generation

2

정렬 된 데이터 모음을 '지능적으로'비닝하는 방법은 무엇입니까?

지능적으로 정렬 된 컬렉션을 비우려고합니다. 개의 데이터 모음 이 있습니다. 하지만 난에이 데이터 맞는 것을 알고 불평등 쓰레기통 크기. 데이터에 적합하게 엔드 포인트를 지능적으로 선택하는 방법을 모르겠습니다. 예를 들면 다음과 같습니다.m엔nn미디엄mm 내 컬렉션에 12 개의 항목이 있고 데이터가 3 개의 저장소에 적합하다는 것을 알고 있습니다. Index: 1 2 3 4 …

11 clustering histogram binning

4

다중 회귀 분석에 대한 잔차 대 적합치 그림의 대각선 직선

데이터의 잔차에서 이상한 패턴이 관찰됩니다. [편집] 다음은 두 변수에 대한 부분 회귀 그림입니다. [EDIT2] PP 플롯 추가 배포판이 제대로 작동하는 것 같지만 (아래 참조)이 직선이 어디에서 오는지 전혀 모르겠습니다. 어떤 아이디어? [업데이트 31.07] 그것은 당신이 절대적으로 옳은 것으로 나타났습니다, 나는 리트 윗 수가 실제로 0 인 경우를 가지고 있었고 ~ …

11 regression multiple-regression residuals diagnostic

1

치료 그룹에 필적하는 대조 그룹을 찾으십니까?

수학 보조 소프트웨어를 사용하는 30 명 (캘리포니아의 30 개 학교)의 치료 그룹이 있습니다. 간단한 분석에서, 우리의 치료 그룹과 비슷한 대조군 사이의 학생들의 평균 수학 성장을 비교하고 싶습니다. CA에는 소프트웨어를 사용하지 않은 많은 학교가 있습니다. 통제 그룹에 유사한 수행 학교를 포함 시키길 원합니다 (그들의 기준 점수는 합리적인 오차 범위를 가진 치료 …

11 mathematical-statistics descriptive-statistics computational-statistics

3

정보 이론 중심 한계 정리

정보 이론 CLT의 가장 간단한 형태는 다음과 같습니다. 하자 , 평균 IID 수 이고 분산이 . 하자 정규화 된 합계 농도 될 와 표준 가우시안 밀도 될. 그런 다음 정보 이론적 CLT는 만약 가 대해 유한 하면 으로 냅니다. .0 1 f n ∑ n i = 1 X iX1,X2,…X1,X2,…X_1, …

11 mathematical-statistics information-theory central-limit-theorem

2

적분의 정확도를 추정하는 방법?

컴퓨터 그래픽에서 매우 일반적인 상황은 일부 픽셀의 색상이 실제 가치 함수의 적분과 동일하다는 것입니다. 함수가 분석적으로 풀기에는 너무 복잡하기 때문에 종종 수치 근사치가 남습니다. 그러나이 함수는 종종 계산하는 데 비용이 많이 들기 때문에 계산할 수있는 샘플 수에 크게 제약을받습니다. (예를 들어, 백만 개의 샘플을 가져 와서 그대로두기로 결정할 수는 없습니다.) …

11 estimation monte-carlo function quasi-monte-carlo

5

로지스틱 회귀 분석을 위해 데이터를 분할하는 수단으로 클러스터링

로지스틱 회귀 모델의 일부 기능을 기반으로 학생의 성공 또는 실패를 예측하려고합니다. 모델의 성능을 향상시키기 위해 나는 명백한 차이를 기반으로 학생들을 여러 그룹으로 나누고 각 그룹에 대해 별도의 모델을 만드는 것에 대해 이미 생각했습니다. 그러나 시험을 통해 이러한 그룹을 식별하는 것이 어려울 수 있으므로 학생들을 기능별로 묶어서 분할하는 것을 생각했습니다. 이러한 …

11 clustering data-mining logistic

1

시계열에서 마르코프 속성 테스트

인 (관측 된) 시계열 가 주어지면 (즉, 마르코프 속성)?X t ∈ { 1 , . . . , N } P ( X t | X t - 1 , X t - 2 , . . . , X 1 ) = P ( X의 t | X t …

11 time-series hypothesis-testing markov-process

6

비선형 회귀 분석을위한 특이 치 식별

진드기의 기능적 반응 분야에 대한 연구를하고 있습니다. Rogers 유형 II 함수의 매개 변수 (공격 속도 및 처리 시간)를 추정하기 위해 회귀 분석을 수행하려고합니다. 측정 데이터 세트가 있습니다. 특이 치를 가장 잘 결정할 수있는 방법은 무엇입니까? 합니다 (dateset라는 간단한 2 열 텍스트 파일로 내 회귀를 위해 나는 R에 다음 스크립트 (비 …

11 r outliers nonlinear-regression

3

데이터 전처리 및 이상치 탐지 기술을 다루는 훌륭한 책

제목이 올라 가면서, 일반적으로 데이터 전처리, 특히 이상치 탐지 기술을 다루는 최신의 좋은 책을 아는 사람이 있습니까? 이 책은 그것에 독점적으로 초점을 맞출 필요는 없지만 앞에서 언급 한 주제를 철저히 다루어야합니다. 나는 시작점에 만족하지 않고 논문 목록을 인용하며 다양한 기술에 대한 설명이 책 자체. 누락 된 데이터를 처리하는 기술이 바람직하지만 …

11 dataset data-mining references outliers

3

통계 개념을 가르치는 수업 활동 / 실험?

나는 십대들에게 통계에 관해 1 시간 동안 강의를하려고합니다. 아마 한 번만 볼 것입니다. 이 시나리오는 계속해서 발생할 수 있습니다. 통계를 경험할 수 있도록 몇 가지 활동을하고 싶습니다. 그러나 나는 확률, 통계적 추론, 탐색 적 분석 등에 대해 아무것도 모르는 사람들과 함께해야합니다. 내 생각은 미디어가 가끔 사용하는 간단한 시각화 "트릭"을 겪고 …

11 teaching