彩票网-捕鱼

科技動態 首頁  >  學術科研  >  科技動態  >  正文

煙臺大學劉志中教授團隊在多模態情緒識別領域取得新進展
作者:計算機與控制工程學院     日期:2024-05-08     來源:科技處    

近日,煙臺大學計算機與控制工程學院劉志中教授團隊論文“Similar Modality Completion-Based Multimodal Sentiment Analysis under Uncertain Missing Modalities”被國際頂級期刊Information Fusion以長文錄用,該期刊為人工智能與計算機科學領域的國際權威刊物(中科院SCI一區,TOP期刊,影響因子18.6)。該研究成果以煙臺大學為第一單位,研究生孫宇航為第一作者,劉志中教授為通訊作者。合作單位包括Macquarie University、哈爾濱工業大學(威海)、Auckland University of Technology。

該論文針對“世界老齡化人群存在嚴重心理疾病而亟需研發一種多模態情緒識別(MSA)技術,從而能夠主動準確地識別出用戶的情緒,為其提供及時服務”這一現實需求,為解決不確定模態缺失場景下的多模態情緒識別問題,劉志中團隊創新性地提出了一種基于相似模態補全的多模態情緒識別模型(SMCMSA),如圖1所示。

圖1.不確定模態缺失下的多模態情感分析模型(SMCMSA)

SMCMSA模型構建了全模態樣本數據庫,使用預訓練的單模態情感分析模型對樣本數據進行情感標簽預測,通過設計兩個獨立的相似模態補全策略對缺失模態進行補全。對于補全后的數據,利用Transformer的Encoder模塊對文本、視頻和音頻模態進行編碼,并在預訓練模型指導下進行模態融合,提升表示質量,并運用基于決策級融合策略得到最終的識別結果。目前,該模型的情緒識別準確度處于領先水平。該研究工作得到了國家自然科學基金項目、山東省自然科學基金重點項目、山東省泰山特聘學者項目、澳大利亞研究理事會(ARC)未來獎學金和發現項目的支持。

論文鏈接:

https://www.sciencedirect.com/science/article/pii/S156625352400232X

來稿時間:5月8日 審核:劉希斌 責任編輯:安興爽

百家乐官网注册开户送彩金| 百家乐官网小路规则| 娱乐城注册送38彩金| 做生意的怎样招财| 万达百家乐娱乐城| 托克托县| 优博地址| 有钱人百家乐官网的玩法技巧和规则| 百苑百家乐的玩法技巧和规则| 赌博百家乐官网技巧| 威尼斯人娱乐城开户地址| 百家乐百家乐群| 正网开户| 二八杠技巧培训| 百家乐官网凯时娱乐平台| 大发888线上娱乐百家乐| 骰子百家乐官网的玩法技巧和规则 | 百家乐赌场信息| 百家乐官网趋势方向| 网络百家乐怎样出千| 真人百家乐官网视频赌博| 赌百家乐官网的下场| 博彩旅游业| 大发888娱乐城官方下载lm0| 百家乐相对策略| 百家乐官网网上真钱娱乐场开户注册| 百家乐官网h游戏怎么玩| sp全讯网新2| 大发888娱乐城刮刮乐| 百家乐智能分析| 怎样看百家乐路单| 百家乐送彩金网络| 康莱德百家乐官网的玩法技巧和规则| 大赢家百家乐66| 百家乐官网群到shozo网| 在线百家乐官网下| 博彩百家乐官网组选六六组| 免费百家乐官网分析工具| 百家乐存在千术吗| 百家乐视频游戏视频| 缅甸百家乐官网赌博有假吗|