作者：趙曄 核稿：白宗文
本網(wǎng)訊 我校物理與電子信息學(xué)院張富春教授與重慶大學(xué)計(jì)算機(jī)學(xué)院南智雄副教授共同指導(dǎo)的信息與通信工程2021級(jí)碩士研究生馬宗楠的論文“Multimodal Interactive Fusion for Action Anticipation”被RSS 2023 Workshop接收。RSS會(huì)議全稱(chēng)為機(jī)器人：科學(xué)與系統(tǒng)（Robotics： Science and Systems），是機(jī)器人領(lǐng)域的頂級(jí)會(huì)議，由Robotics：Science and Systems Foundation組織主辦，每年舉辦一次。自第一屆會(huì)議以來(lái)，RSS已經(jīng)成為了機(jī)器人領(lǐng)域內(nèi)最具有影響力的會(huì)議之一，RSS會(huì)議邀請(qǐng)來(lái)自世界各地的研究人員和專(zhuān)家在會(huì)議上發(fā)表他們的最新研究成果。由于每年接收的論文數(shù)量通常不足100篇，每篇被接收的論文都代表了機(jī)器人領(lǐng)域最前沿的研究成果之一。會(huì)議側(cè)重于機(jī)器人算法，并覆蓋了機(jī)器人領(lǐng)域的各個(gè)方面，包括感知、規(guī)劃、控制、操作、人機(jī)交互等，旨在促進(jìn)機(jī)器人學(xué)的跨學(xué)科交流和合作。
今年RSS的“Social Intelligence in Humans and Robots”Workshop僅錄用了9篇，其中8篇分別來(lái)自麻省理工學(xué)院、普林斯頓大學(xué)、南加州大學(xué)、哈佛大學(xué)和劍橋大學(xué)等國(guó)際一流大學(xué)，馬宗楠同學(xué)的論文是亞洲唯一錄用的論文，并在Contributed Talks環(huán)節(jié)進(jìn)行了演講和成果分享。
論文主要研究了多輪交互融合的行為預(yù)測(cè)方法。通過(guò)研究動(dòng)作預(yù)測(cè)，理解并觀(guān)察幀預(yù)測(cè)的下一個(gè)動(dòng)作，這在視頻理解中至關(guān)重要。論文通過(guò)對(duì)比研究并行交互融合和漸進(jìn)交互融合機(jī)制。系統(tǒng)揭示了兩者獨(dú)特的優(yōu)勢(shì)：并行融合引入了雙向相關(guān)結(jié)構(gòu)，增強(qiáng)了魯棒性。如果一個(gè)方向發(fā)生錯(cuò)誤，另一個(gè)方向可予以糾正。漸進(jìn)式方法考慮了每種模態(tài)之間的差異，并對(duì)它們提供的信息賦予不同的權(quán)重。該方法融合靜態(tài)特征，并將其作為查詢(xún)?nèi)ソY(jié)合動(dòng)態(tài)特征，從而達(dá)到更高的預(yù)測(cè)精度。該論文為行為預(yù)測(cè)提供了新的思路和改進(jìn)效果。
近年來(lái)物理與電子信息學(xué)院不斷加強(qiáng)學(xué)科建設(shè)，在人才培養(yǎng)、平臺(tái)建設(shè)、重大項(xiàng)目、科學(xué)研究等方面持續(xù)進(jìn)步，助力學(xué)校更有特色、更有水平建設(shè)。
