語義動作錨點：連結共語手勢中的動作與意義

研究論文提出了一種名為語義動作錨點的新方法，旨在解決共語手勢中動作與意義的連結問題。論文指出，現有的對比對齊方法往往過度強調低層次運動學，而忽略了語義手勢的象徵內容。語義動作錨點通過將 3D 手勢離散化為身體手部動作基元，將其動詞化為結構化描述，並與文本轉錄對齊，提供輔助對比監督。在 BEAT2 數據集上的實驗顯示，該方法在文本到手勢檢索的 R@1 指標上比直接基線提高了 8.2%，並在手勢到文本檢索方向上超越了先前方法。此外，下游生成研究顯示，用戶顯著偏好使用本方法檢索到的手勢，表明語義基礎的檢索能更好地傳達溝通意圖。總體而言，這項工作為手勢合成和理解領域帶來了進展，潛在應用於虛擬環境中的人機交互。