基于生理學的舌頭建模與動畫合成.pdf

1、近年來，研究人員嘗試根據發(fā)音器官的運動機制和原理來模擬或再現發(fā)音器官的運動，并將其用于語言學、臨床醫(yī)學和人機交互等場合。人類的發(fā)音器官主要包括舌頭、嘴唇、牙齒、軟硬腭、咽腔和鼻腔等。其中，舌頭是最重要、最精細和最靈活的器官，舌頭的運動在很大程度上決定了人說話時的發(fā)音變化。因此，針對舌頭的生理學建模與仿真研究至關重要。過去，由于舌頭生理數據的采集比較困難、再加上計算機仿真技術的發(fā)展相對滯后，如何在生物力學的意義上逼真地表現人說話時的舌頭運

2、動成為發(fā)音可視化領域的一大難題。因此，構建一個能反映真實生理特性的舌頭模型，并通過其合成出語音同步的逼真動畫是一項極富挑戰(zhàn)性的研究工作。
　　本文以還原逼真的舌頭生理特性和合成高真實感的舌頭動畫為研究目標，構建了一個高精細的生理學舌頭模型，并在此基礎上構建了一個高真實感的舌頭動畫合成系統。本文的主要研究內容和創(chuàng)新點如下:
　　1.對舌頭相關的解剖學、生物力學知識進行了深入調研，提出了一種基于舌頭的斷層掃描數據和相關醫(yī)學資料的

3、解剖學建模方法，構建了一個擁有精確三維外觀和內部肌肉結構的舌頭幾何網格模型。
　　具體言之，首先根據舌頭的斷層掃描數據構建三維舌面網格模型，接著利用網格劃分技術用稠密而規(guī)整的四面體對其內部進行填充，形成舌頭的四面體網格模型。然后，使用一種新的交互式肌肉標記法對舌頭肌肉的幾何形狀和肌纖維結構進行標記。據此，肌肉由分布于舌頭內部的的四面體組合表示，而肌纖維則由肌肉內部各節(jié)點上的向量表示。仿真結果表明，該方法可以實現對舌頭外觀幾何形狀和

4、內部肌肉結構的高精細模擬。
　　2.對舌頭的運動變形問題進行了研究，提出了一種基于有限元技術的舌頭生物力學建模方法，該方法能夠對舌頭軟組織的彈性特性以及肌肉運動特性進行精確的模擬仿真。該方法構建的舌頭模型能夠通過生理參數來驅動舌頭模型發(fā)生變形進而合成出逼真的舌頭動畫。
　　首先舌頭模型整體被賦予一個非線性、準不可壓縮性、各向同性和超彈性的材料屬性，其次那些被標記為肌肉的四面體被額外賦予一個特殊的材料屬性，以體現肌肉的主動和被

5、動收縮特性。通過有限元分析計算，舌頭模型的運動可以根據施加的肌肉激勵來驅動產生。實驗結果表明，本文的生物力學建模方法能讓舌頭模型有效地模擬舌頭的彈性特性和其肌肉受激產生形變等生理功能，從而產生逼真的舌頭運動。
　　此外，鑒于舌頭在發(fā)音過程中運動速度較快，本文充分考慮了針對舌頭的動態(tài)特性的模擬仿真，通過將舌頭肌肉的速度-張力關系嵌入到舌頭肌肉的本構關系中，實現了舌頭變形的準靜態(tài)仿真和動態(tài)仿真。
　　3.結合語音可視化的實際應用

6、，根據上述舌頭生理模型，構建了一個可由文本或語音驅動的舌頭動畫合成系統，該系統可以在目前舌頭三維數據缺乏的情況下，通過二維舌頭運動數據合成高真實感的舌頭動畫。
　　首先利用舌頭生理模型合成大量的舌頭運動樣本，并基于這些樣本訓練得到一個從肌肉激勵到二維舌頭輪廓的轉換模型。然后，對X光二維舌頭運動數據進行運動跟蹤，得到與發(fā)音相對應的舌頭剛體位移和舌頭輪廓的局部變形信息。最后，利用訓練好的轉換模型，根據X光數據中的舌頭輪廓局部變形逆向計