返回事件流

跨語言轉向用於比喻語言生成

研究論文提出,多語言大型語言模型能夠生成比喻語言,但驅動此行為的內在信號是語言特定的還是可跨語言重用的尚不清楚。本研究使用激活轉向作為探針,從一個語言的比喻與字面激活差異中估計比喻類別的方向,並在生成時應用它。研究涵蓋五種比喻類別、六種語言和四個多語言大型語言模型,發現這些方向在自身語言內可以可靠地引導生成,尤其在隱喻和明喻方面最為穩健。更重要的是,這些方向可以跨語言轉移:從一種語言學習的方向在應用於另一語言時能增加目標行為,其中德語是較為敏感的目標語言之一。進一步研究顯示,從其他語言組裝的方向可以匹配甚至超越目標語言的原始方向,而移除這個共享組件會削弱原始引導能力。這些結果提供了直接證據,表明比喻生成存在可重用但目標依賴的跨語言信號,對理解多語言模型的內部機制具有重要意義。

來源

來源:網頁來源