語言信號處理章音高追蹤的應(yīng)用

1、Ch8 Application of Pitch TrackingDanju Lu2009Application of Pitch Tracking旋律識別音調(diào)評分語音評分（組成部分）國語音調(diào)識別8-1 Melody Recognition旋律辨識（Melody Recognition）識別對象：音樂識別依據(jù)：pitch 識別目的：要讓使用者在哼唱一首歌之后，系統(tǒng)即可以從使用者的歌聲計算出音高向量，接著以此音高向量在音樂數(shù)據(jù)庫中比對，找出最接近的歌。 由于這種找歌方式并不牽涉到音樂的 Metadata（例如歌曲名稱、歌詞、歌手、專輯、作詞者、作曲者等文字信息），所以又稱為內(nèi)容式的音樂檢索（Co

2、ntent-based Music Retrieval）。內(nèi)容式的音樂檢索（Content-based Music Retrieval）Golden Retriever 8-2 音調(diào)評分音調(diào)評分（Intonation Assessment）目的：以計算機來自動評斷一個人發(fā)音的音調(diào)是否標(biāo)準(zhǔn)，并提示相異之處。外國人 ：“窩腰刀胎杯刊顛鷹” 原因：外國人全部音都只發(fā)了“一聲” 啟發(fā)：音樂感強的人學(xué)外語會容易一些我要到臺北看電影 8-2 音調(diào)評分中國人學(xué)英語：標(biāo)準(zhǔn)：Can I take your order? blueLearner1: Can I take your order? Redwave2p

3、itchByAcf01.m8-2 音調(diào)評分中國人學(xué)英語：標(biāo)準(zhǔn)：Can I take your order? blueLearner2: Can I take your order? redwave2pitchByAcf01.m問 題除ACF外，能否用其它方法來實現(xiàn)pitch 的跟蹤呢？ACFAMDFSIFTMIX（AMDF&ACF）82 實際應(yīng)用英文復(fù)讀機、電子英文學(xué)習(xí)機： 可將此音調(diào)計算及評分機制在8-bit 8051和凌陽16-bitSPCE061平臺上。 使用者不但可以聽到例句的發(fā)音，更可以對著機器講同樣一句話，系統(tǒng)就會根據(jù)音調(diào)相似度來評分，同時在屏幕上畫出兩條音調(diào)曲線，讓使用者可以知道

4、哪里的音調(diào)不對，進(jìn)而可以反復(fù)練習(xí)。同時也可以運用利用音調(diào)評分的機制來設(shè)計從基本到進(jìn)階的音調(diào)自我測驗，以便循序漸進(jìn)、自我挑戰(zhàn)、精益求精。凌陽16-bitSPCE061問 題：語音識別？是否有可能針對語音內(nèi)容的相似度進(jìn)行評分呢？可以?；旧希粢獙φZ音內(nèi)容進(jìn)行評分，就要牽涉到語音辨識的計算，因此計算量比較大，比較難在低階的 MCU (Micro Controller Unit) 平臺實現(xiàn)。 個人計算機可進(jìn)行完整的語音評分（音調(diào)評分只是其中一部份），可以用在各種語言學(xué)習(xí)軟件，比對的參數(shù)比較廣泛，可以包含音量、音高、過零率、有聲與無聲音、倒頻譜參數(shù)、音節(jié)持續(xù)時間等，以達(dá)到更客觀的評分與分析。83 語音

5、評分參數(shù)的選取:語音內(nèi)容VolumeZcrPitchMFCC識別模式的確立 (后續(xù))MFCC處理過程將時間幀信號頻率信號信息處理（變換后）時間幀信號fft (timefreq) 變換域filter (頻域信息加工處理)ifft (freqtime) (DCT 離散cosine 變換)Pre-the First Competition Pitch Tracking每組收集3-5首歌曲的midiMidi文件不要有前湊Midi文件名稱要求：歌名_歌手名_位置代碼.midi （網(wǎng)上下載：不要用有合旋的）歌名_歌手名_位置代碼.wav（跟據(jù)midi自己錄制該歌曲（請唱出歌詞）位置代碼：0：從頭唱 歌手名：可為“