전산 실험을 수행하기위한 지침은 무엇입니까?

물리학, 생물학, 화학 등은 실험을위한 다양한 규칙 세트를 가지고 있습니다 : 관련이있는 사건, 샘플의 오염을 피하는 방법, 재생 과정을 만들고 수정하는 방법 등.

수치 실험에서 정확성과 재현성을 보장하기위한 표준, 프로토콜 및 모범 사례는 무엇입니까?

계산 실험의 결과를 설계, 실행 및보고하는 방법에 대해 많은 글을 썼습니다. 이것은 오픈 소스 소프트웨어 및보다 광범위한 "공개 과학"운동과 명백한 관련이 있습니다. 또 다른 중요한 문제는 알고리즘의 속성을 더 잘 이해하는 데 도움이되는 "내 코드가 사용자 코드보다 빠름"연구와 연구의 차이점입니다.

컴퓨터 실험 및 테스트에 대한 참고 자료는 다음과 같습니다.

관, 마리, 매튜 제이 솔츠 만 2000.“ 알고리즘 및 휴리스틱의 전산 테스트 통계 분석 .” INFORMS Journal on Computing 12 (1) : 24–44.

Crowder, Harlan, Ron S. Dembo 및 John M. Mulvey. 1979.“ 수학적 소프트웨어를 이용한 전산 실험보고 .” 수학 소프트웨어 (TOMS) 5 (2)의 ACM 트랜잭션 : 193–203.

Feitelson, Dr. G. 2006.“ 실험적 컴퓨터 과학 : 문화적 변화의 필요성 .”

후커, 존 N. 1995.“ 휴리스틱 테스트 : 모든 것이 잘못되었습니다 .” 휴리스틱 스 1 (1) : 33–42.

McGeoch, Catherine C. 2012. 실험 알고리즘 안내. 케임브리지 대학 출판부.