통제 된 실험에서 숨어있는 변수의 어떤 예가 출판물에 있습니까?


11

이 논문에서 :

숨어있는 변수 : 몇 가지 예 Brian L. Joiner American Statistician Vol. 1981 년 11 월 35 일 35 호 227-233

Brian Joiner는 "무작위 화는 만병 통치약이 아니다"고 주장합니다. 이것은 다음과 같은 일반적인 진술과 상반됩니다.

잘 설계된 실험에는 독립 변수와 종속 변수 사이의 관찰 된 관계에 대한 설명으로 연구원이 외부 변수를 제거 할 수있는 설계 기능이 포함됩니다. 이러한 외부 변수를 숨어있는 변수라고합니다.

인용문은이 질문에서 가져 왔으며 출처가 없지만 내 경험에 따르면 일반적인 태도를 나타냅니다 : 숨어있는 변수 및 영향력있는 관찰의 예

주어진 한 예는 70 년대에 설치류에서 붉은 # 40 식품 염료의 안전성 (특히 발암)을 시험 할 때 케이지 위치 의 영향 이 연구를 혼란스럽게하는 것으로 밝혀졌다. 이제 나는 설치류에서 발암을 연구하는 많은 저널 기사를 읽었으며 아무도이 효과를 제어한다고보고 한 적이 없습니다.

이러한 연구에 대한 추가 논의는 여기에서 찾을 수 있습니다 . 규제 프로세스의 통계에 관한 사례 연구 : FD & C Red No. 40 실험.

유료 버전을 찾을 수 없지만 다음은 발췌입니다.

1 월 회의에서, 우리는 케이지 행과 RE (망상 피 내피 종양) 사망률 사이의 강한 상관 관계를 나타내는 예비 분석 (14)을 제시했는데, 이는 17 % (하단 행)에서 32 % (상단 행)까지 (테이블) 2). 성별, 복용량 그룹 또는 랙 컬럼 또는 위치별로 이러한 강력한 연관성을 설명 할 수 없었습니다. 후속 분석 (18)은 또한 케이지 위치 (전면 대 후면)가 비 RE 사망률과 상관 될 수 있고 해당 위치는 비 RE 사망까지의 시간과 상관 관계가 있음을 나타냈다.

나는 의학 문헌에 복제와 같은 문제가있는 이유에 특히 관심이 있지만 모든 분야의 예를 환영합니다. 관찰 연구가 아닌 무작위 대조 실험의 예에 관심이 있습니다.


관심있는 문제에서 lukring 변수는 공동 창립자 / 혼란 변수와 동일합니까?
tomka

@tomka 나는 숨어있는 변수를 예상치 못한 혼란스러운 변수로 정의합니다.
플라스크

고마워-이 문제에 대한 나의 의견은 예상되는 교란 자 (우리의 위치)를 통제하지 않는 학자들이 치료 효과에 대한 잠재적 결함을 추정하고 차선책을 수행한다는 것이다. 숨어있는 변수는 예상치 못한 상태로 제어 할 수 없으므로 변수가 발생할 경우 불운의 문제입니다. 그러나 관찰되는 경우 문제가 덜 발생하여 사후 제어가 가능합니다. 관찰되지 않은 미지의 잠복자는 위험합니다. 이것이 의심되는 경우 감도 분석이 권장 될 수 있습니다.
tomka

@tomka 이것이 무엇을보고했는지에 대한 질문을 한 이유입니다. 실험에서 연구자들은 무작위 화하지 않을 것이라고 생각하는 많은 단계가 있는데, 아마도 그들이 관련이 없다고 생각하기 때문에 무작위로 생각하지 않기 때문에 (매일 작업에 시간을 더할 수도 있음) 라벨링에 실수를 일으킬 가능성이 있습니다. 차를 시음하는 피셔 레이디의 예에서 그는 모든 순서를 무작위 화한다고 말합니다. 이는 많은 전임상 실험에는 실용적이지 않습니다.
Flask

무작위 할당의 목적은 제어되지 않은 변수의 균형을 맞추기위한 것이 아니라 변수를 무작위로 만드는 것입니다. 유의성 검정의 기본 논리는 임의의 제어되지 않은 변수가 결과를 그럴듯하게 설명 할 수 있는지 여부에 대한 검정을 제공하는 것입니다. 다시 말해, 연구는 숨어있는 변수를 유효하게 측정 할 필요가 없습니다.
David Lane

답변:


5

임상 연구의 몇 가지 예는 무작위 배정 발생하는 변수 일 수 있습니다. 무작위 배정은 여러분을 전혀 보호하지 않습니다. 내 머리 꼭대기에서 몇 가지 가능성으로 제기되거나 언급되었습니다.

  • HIV 예방을위한 자발적인 성인 남성 할례 후 행동의 변화
  • RCT의 치료군과 관리 군 간의 후속 조치에 대한 차등 손실
  • 보다 구체적인 예에는 병원에서 입수 한 감염 예방을보고있는 최근의 "유니버설 가운과 글 로빙의 혜택"연구가 포함될 수 있습니다 ( 블로그 주석은 여기 페이퍼 월 뒤에 있습니다). 개입뿐만 아니라, 잠재적으로 하기 때문에 그것의, 환자 및 직원 / 방문자 사이에 두 손 위생 요금 및 연락처 요금이 변경되었습니다.

무작위 화는 무작위 화 이후에 발생하기 때문에 이러한 효과 중 어느 것도 방지합니다.


3

다음은 마이크로 어레이 데이터에서 찾은 예입니다. 측정 된 표현은 "칩"상의 위치와 강한 상관 관계가있는 것으로보고되었다. 이는 샘플의 위치를 ​​무작위로 추출하면 라벨링 오류가 발생할 가능성이 높아져 기술적 인 작업을하는 사람들이 중요하지 않다고 생각되면 무작위 화하지 않을 수 있습니다.

치료에 실험 단위를 무작위로 할당하면 치료 이외의 다른 요인이 연관의 원인 일 가능성을 제어합니다 (1,2). Illumina® 및 NimbleGenTM과 같은 일부 마이크로 어레이 플랫폼에서 여러 생물학적 시료를 단일 칩에 하이브리드화할 수 있습니다. 실험 설계에서 균형 및 무작위 화를 고려하지 않는 한 칩 및 샘플 위치 효과는 마이크로 어레이 실험의 정확도 및 재현성에 영향을 줄 수 있습니다 (4). 우리의 목표는 혼란스럽고 무작위 실험에서 이러한 효과의 영향을 비교하는 것이 었습니다.

Illumina 플랫폼을 사용한 Microarray 실험 설계에서 무작위 화의 중요성

Ricardo A. Verdugo, Christian F. Deschepper 및 Gary A. 처칠. 잭슨 연구소, 바 하버, ME 04609, Institut de Recherches Cliniques, 몬트리올, QC, 캐나다.


1

이 질문을 할 때 원래 의도했던 것과 약간 다를 수있는 예가 있습니다. 지난 1 ~ 2 년은 무작위 실험으로 인한 효과의 복제 성이 부족한 원인에 대해 심리학에 대한 지속적인 논의를 일으켰습니다. 이 토론의 버전은 수년 동안 등장했지만, 가설 구성, 데이터 수집, 데이터 분석 및 결과보고에서 심리학의 표준이되는 많은 관행을 보여주는 논문 이 발표 된 이후 토론은 더욱 설득력이되었습니다. 연구자들은 임의로 선택한 가설까지지지하는 결과를 찾을 수 있습니다 (원본 논문에서 연구자들은 이러한 관행을 사용하여 비틀즈의 "60 세 때"를 듣는 것이 사람들을 더 젊게 만들었다는 것을 보여주었습니다).

물론 문제의 근본은 심리학 (및 기타 과학)에서 널리 퍼져있는 인센티브 구조 가 새롭고 긍정적 인 "게시 가능한"결과를 얻는 것입니다. 이러한 인센티브는 연구 과학자들이 데이터 제작만큼 명백하게 "잘못되지는 않지만"부정확 한 결과의 증가로 이어지는 관행을 채택하도록 장려합니다. 이러한 관행에는 다음이 포함됩니다.

  1. 여러 개의 매우 유사한 종속 변수 모음. 원래 가설과 가장 일치하는 결과를 생성하는 종속 변수 만보고됩니다.
  2. 데이터를 수집하는 동안 중요한 결과를 여러 번 테스트하고 유의성이 확보되면 데이터 수집을 중지합니다.
  3. 분석하는 동안 통계 모델에 여러 공변량이 포함됩니다. 마지막 논문에서는 원래 가설과 가장 일치하는 결과를 이끌어내는 공변량 조합 만보고됩니다.
  4. 원래 hyptohese와 일치하지 않는 결과로 이어지는 조건을 삭제하고 이러한 조건을 종이에보고하지 않습니다.

등등.

나는이 경우 "숨어있는 변수"가 긍정적이고 "출판 가능한"결과를 얻은 것에 대한 보상을주는 인센티브 구조라고 주장 할 것이다. 실제로, 복제에 실패한 심리학 (많은 내 전문, 사회 심리학에 있음)에서 이미 몇 가지 중요한 결과가있었습니다. 많은 사람들이 주장하는 이러한 복제 실패는 심리학의 모든 하위 영역에 의심을 던졌다.

물론, 오 탐지를 장려하는 인센티브 구조의 문제는 심리학에 고유하지 않습니다. 이것은 모든 과학과 모든 무작위 통제 시험에 고유 한 문제입니다.

참고 문헌

Simmons, JP, Nelson, LD, & Simonsohn, U. (2011). 거짓 양성 심리학 : 데이터 수집 및 분석에 공개되지 않은 유연성으로 중요한 것을 제시 할 수 있습니다. 심리 과학 , 17, 1359-1366.

Nosek, BA, Spies, JR, & Motyl, M. (2012). 과학적 유토피아 : II. 출판 가능성보다 진실을 장려하기 위해 인센티브와 관행을 재구성합니다. 심리학에 대한 관점 , 7, 615-631.

Yong E. (2012). 잘못된 사본. 자연 , 485, 298-300.

Abbott, A. (2013). 논쟁은 사회 심리학에 새로운 타격을 주었다. 자연 , 497, 16.

당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.