1.一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,包括以下步驟:
2.根據(jù)權利要求1所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s2包括:
3.根據(jù)權利要求2所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s2還包括基于穩(wěn)相信號的周期性變化檢測語音節(jié)段邊界,通過自適應閾值法或能量包絡分析進行音節(jié)分割,并對每段信號進行周期增強擬合,獲得音節(jié)結構與時間邊界。
4.根據(jù)權利要求1所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s3包括:
5.根據(jù)權利要求1所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s3還包括:
6.根據(jù)權利要求5所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s3還包括:
7.根據(jù)權利要求6所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s36包括:對穩(wěn)相信號梅爾譜和模擬雷達梅爾譜沿頻率維進行能量匯聚,分別得到對應的時間能量序列;計算兩端時間能量序列在時間平移下的歸一化相關系數(shù);根據(jù)歸一化相關系數(shù)構建代價函數(shù);通過最小化代價函數(shù),得到音頻信號與雷達信號之間的最優(yōu)時間平移量。
8.根據(jù)權利要求1所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s4包括
9.根據(jù)權利要求8所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s4還包括:
10.根據(jù)權利要求9所述的一種基于物理引導網(wǎng)絡的毫米波雷達語音重建與識別方法,其特征在于,s4還包括:語音梅爾頻譜圖經(jīng)逆梅爾變換和逆短時傅里葉變換重建生成最終語音波形;s5中,分別將參考音頻信號下的真實語音波形與最終語音波形輸入輕量級卷積神經(jīng)網(wǎng)絡分類器,通過比較兩者的識別結果評估多模態(tài)重建網(wǎng)絡模型的身份保持能力。