歡迎來(lái)到营口市科技创新综合服务平台!
結合DenseNet和resBi-LSTM的中文句子級唇語(yǔ)識別方法
技術(shù)類(lèi)型： 發(fā)明專(zhuān)利
交易方式： 完全轉讓
專(zhuān)利號：CN201910888992.9
技術(shù)詳細介紹
本發(fā)明公開(kāi)了一種結合DenseNet和resBi?LSTM的中文句子級唇語(yǔ)識別方法，本發(fā)明將唇語(yǔ)識別拆分為拼音預測與語(yǔ)言翻譯兩個(gè)部分，降低了唇語(yǔ)識別的難度。
使用DenseNet提取視覺(jué)特征，充分利用淺層特征，有效緩解了梯度消失的問(wèn)題，并且減少了網(wǎng)絡(luò )的參數。使用1×1卷積代替全連接實(shí)現特征降維的功能，保留了特征中的空間信息，在唇語(yǔ)識別技術(shù)研究中，空間信息起著(zhù)重要作用。
使用resBi?LSTM進(jìn)行視覺(jué)特征的處理，最后得到結合了視覺(jué)特征和語(yǔ)義特征的復雜特征，減少了有效信息的損失，提高了唇語(yǔ)識別的準確率。
相關(guān)成果 
