一種基于李群論的多模態情感識別方法
本發明公開了一種基于李群論的多模態情感識別方法,包括以 下步驟:獲取視頻,并提取視頻幀中圖像區域的高斯型特征描述子, 基于高斯型特征描述子對視頻中的圖像區域進行跟蹤,根據視頻子序 列構建 ARMA 模型獲取 ARMA 模型間的距離,根據 ARMA 模型之間 的距離構建核函數,并進行情感表達分類,根據人體、臉部和手部的 情感類別概率對人進行情感識別。本發明根據視頻中所包含的人體姿 態運動信息、手勢和臉部表情信息來判斷人的情感狀態,是一個將視 頻數據映射到人體運動特征、手勢特征和臉部表情特征,再從人體運 動特征空間和臉部表情特征映射到狀態空間的過程,并提出利用李群 論進行多模態情感識別,提高模型進行情感識別的精確性。
華中科技大學
2021-04-11