실시간 휴먼 피치 감지

원시 마이크 입력을 분석하고 플레이어에게 노래가 얼마나 좋은지 알려주는 노래 게임을 구현하려고합니다. 그것은 실시간으로 이루어져야합니다.

나는 같은 질문을하는 많은 스레드를 보았지만 필드에 대한 경험이 부족하고 수학 배경이 얕기 때문에 여전히 그 문제를 해결하지 못했습니다. DSPDimension 웹 사이트 피치 시프트의 기사를 기반으로 알고리즘을 구현했습니다 : http://www.dspdimension.com/admin/pitch-shifting-using-the-ft/

나는 기사가 설명하는 것처럼 실제 주파수와 크기를 추출하지만 이것으로 기본 주파수를 찾는 지 모른다. 빈을 최대 크기로 얻으려고했지만 피치 신호가 더 높은 경우에만 올바른 결과를 얻을 수 있습니다. 사용하는 오버 샘플링 계수는 중요하지 않지만 여전히 낮은 주파수 신호에 대해 나쁜 데이터를 얻습니다. 이 접근 방식이 완전히 잘못 되었습니까, 아니면 올바른 방향으로 가고 있지만 뭔가 빠졌습니까?

미리 감사드립니다.

편집 : 나는 피치 클래스에만 관심이 있다는 것을 잊어 버렸습니다. 따라서 기본이 누락되었지만 샘플에 강한 색조가 있습니다.

EDIT2 : 모두 덕분에 방금 매력처럼 작동하는 알고리즘 버전을 마쳤습니다. 낮은 피치 추정 문제는 입력 테스트 때문이었습니다. 노트를 부를 때 정확하게 일치했습니다. 또한, 나는 최고봉뿐만 아니라 모든 고조파를 고려하고 있습니다.

나는 가장 큰 크기로 bin을 얻으려고 노력했지만 더 높은 피치 신호에 대해서만 올바른 결과를 제공하지만 사용하는 오버 샘플링 계수는 중요하지 않지만 여전히 낮은 주파수 신호에 대해 나쁜 데이터를 얻습니다.

고조파 가 기본보다 크기 때문입니다. 스펙트럼을 플로팅하면 알 수 있습니다. 진정한 기초를 찾는 더 좋은 방법은 자기 상관입니다. 그런 다음 파형 자체를 "미끄럼 이동"하고 파형이 자체적으로 정렬되는 지연을 찾습니다.

http://www.phon.ucl.ac.uk/courses/spsci/matlab/lect10.html

그들이 정확한 음을 부르기를 정말로 원합니까, 아니면 음성 레지스터에 따라 옥타브를 위나 아래로 부르면 괜찮습니까?

예, 피치에 피크 주파수 추정기를 사용하는 것은 잘못되었습니다. 피치는 심리 음향 현상이므로 피치 감지 또는 추정은 주파수 추정과 다릅니다. 비슷한 질문에 대한 이전 답변에서 제공된 피치 추정 방법이 많이있었습니다. 선택할 수있는 항목이 1 개 이상 있습니다.

여기의 하나 /programming/4227420/matlab-missing-fundamental-from-an-fft/4231322#4231322 , 또 다른 : 개선 피치 검출을위한 팁

ADDED # 1 : 이와 비슷한 질문이 너무 자주 제기되어 주제에 대한 더 긴 블로그 게시물을 작성했습니다. http://www.musingpaw.com/2012/04/musical-pitch-is-not-just-fft- frequency.html