第十九屆“挑戰杯”全國大學(xue)生課外(wai)學(xue)術(shu)科技(ji)作品競賽2024年度“揭榜掛帥”專項賽終審決賽于2024年11月8日至10日在北京、11月15日(ri)至17日在(zai)浙(zhe)江舉辦。“挑戰杯(bei)”全國大(da)學生課(ke)(ke)(ke)外(wai)學術(shu)科(ke)技(ji)(ji)作(zuo)品競賽(sai)是(shi)(shi)由共(gong)(gong)青(qing)團中(zhong)央、中(zhong)國科(ke)協、教育部、中(zhong)國社(she)科(ke)院、全國學聯(lian)和(he)(he)承辦地省級人民政府共(gong)(gong)同主辦的(de)(de)(de)一項具有導向(xiang)(xiang)性(xing)(xing)、示范性(xing)(xing)和(he)(he)群眾性(xing)(xing)的(de)(de)(de)競賽(sai)活動，被譽為當代(dai)大(da)學生科(ke)技(ji)(ji)創新(xin)的(de)(de)(de)“奧(ao)林匹克”盛會(hui)。“揭(jie)(jie)榜(bang)(bang)(bang)掛帥”專(zhuan)項賽(sai)是(shi)(shi)自第(di)十七屆“挑戰杯(bei)”全國大(da)學生課(ke)(ke)(ke)外(wai)學術(shu)科(ke)技(ji)(ji)作(zuo)品競賽(sai)起(qi)，設立的(de)(de)(de)特別競賽(sai)單元，以(yi)(yi)“你來挑，我(wo)來戰”為主題(ti)(ti)，崇(chong)尚“英雄不(bu)論出(chu)處，誰有本事誰揭(jie)(jie)榜(bang)(bang)(bang)”，秉承“以(yi)(yi)國家(jia)重大(da)需(xu)求(qiu)為導向(xiang)(xiang)、以(yi)(yi)競爭協同機制為手段、以(yi)(yi)解決實(shi)(shi)際(ji)問題(ti)(ti)為目標”的(de)(de)(de)思(si)路，聚焦(jiao)“卡脖子”技(ji)(ji)術(shu)，瞄準社(she)會(hui)重大(da)課(ke)(ke)(ke)題(ti)(ti)及現實(shi)(shi)問題(ti)(ti)，以(yi)(yi)“政企(qi)發榜(bang)(bang)(bang)、競爭揭(jie)(jie)榜(bang)(bang)(bang)、開榜(bang)(bang)(bang)簽(qian)約(yue)”的(de)(de)(de)方式，通過“征榜(bang)(bang)(bang)—發榜(bang)(bang)(bang)—競榜(bang)(bang)(bang)—評(ping)榜(bang)(bang)(bang)—奪榜(bang)(bang)(bang)”，由企(qi)事業單位(wei)提出(chu)需(xu)求(qiu)，組委會(hui)面(mian)向(xiang)(xiang)高校和(he)(he)社(she)會(hui)廣發“英雄帖”，高校學生團隊和(he)(he)青(qing)年科(ke)技(ji)(ji)人才團隊打擂揭(jie)(jie)榜(bang)(bang)(bang)。2024年(nian)度“揭榜掛帥”專項賽(sai)(sai)設(she)置高校學(xue)生賽(sai)(sai)道和青年(nian)科技人才賽(sai)(sai)道，共吸引2.7萬(wan)余(yu)人參加，共(gong)有6500余件(jian)參賽作品(pin)，最終來自全(quan)國410余所高校和企業的1950余件(jian)作品入圍終審決賽。
由(you)188bet足球自(zi)動化(hua)系於(wu)俊老師帶領的中(zhong)國金宝搏入口188參(can)賽團隊，參(can)與了此(ci)次專項賽的高校(xiao)學生賽道，在由(you)中(zhong)國聯通發布的“‘基于大模型的多模態風險內容(rong)識別(bie)技術研究’比賽方案”選題(ti)中(zhong)，憑借“鷹眼”-基于(yu)多模態(tai)大模型的(de)深度(du)偽造(zao)內容檢測系統項(xiang)目，在(zai)(zai)眾多參賽作品中脫穎而(er)出，榮(rong)獲國家級一(yi)等獎。這一(yi)成果不(bu)僅展現(xian)了中金宝搏入口188團隊在(zai)(zai)前沿科技(ji)領域的(de)創新實力，也(ye)為(wei)多模態(tai)風(feng)險(xian)內容識(shi)別(bie)技(ji)術的(de)發展注入了新動力。
針(zhen)對發(fa)榜單位(wei)給(gei)出的(de)選題，中國金宝搏入口188團隊提(ti)出了(le)“鷹(ying)眼”系統的(de)解決方案(an)。這一系統是在信(xin)息技術(shu)迅猛(meng)發(fa)展(zhan)，深度偽造技術(shu)生成的(de)虛假視頻、圖像等多模態內容，更加逼真且手段多樣，現有(you)內容識別技術(shu)難以(yi)應對的(de)背(bei)景之下(xia)所研發(fa)產(chan)生的(de)。該系統由(you)DeepFake專家檢(jian)測系(xi)統(tong)(tong)和(he)基(ji)于多模(mo)態大模(mo)型的(de)多級描述視頻理(li)解生成(cheng)系(xi)統(tong)(tong)組成(cheng)。針對傳統(tong)(tong)注意力機制在處理(li)局部細節和(he)模(mo)態間關系(xi)的(de)不(bu)足，團隊創新(xin)提(ti)出Audio-Viusal Local-Global Interaction Module（AV-LG Module），通(tong)過局部區域內自(zi)(zi)注(zhu)意(yi)力、全(quan)局區域間自(zi)(zi)注(zhu)意(yi)力以及(ji)局部-全局交互，有效整合視頻和音(yin)頻模態信息。實驗數據表明(ming)，該專(zhuan)家(jia)檢測系統在業界最大DeepFake檢測數(shu)據(ju)集上準(zhun)確率接近100%。在視頻、圖像(xiang)理(li)解與多級描(miao)述生成方面，模型通過Time-aware Frame Encoder捕捉幀和(he)時間(jian)戳(chuo)信(xin)息，Sliding Video Q-Former捕獲幀(zhen)間時序信息并實現(xian)模態對齊(qi)，在(zai)多(duo)個測試(shi)集上性能優越。
圖2. 公(gong)示(shi)結果（//mp.weixin.qq.com/s/pteEDMpdd3LVZcoRh6BTww）
此次比賽的團(tuan)隊工作由於俊(jun)老師指(zhi)導研(yan)究生王一(yi)帆(fan)、趙績等人完成，這次在“挑戰杯”專項賽中(zhong)獲(huo)獎是(shi)對中(zhong)國金宝搏入口188團(tuan)隊創新能力和科研(yan)實力的高(gao)度認可(ke)。未來，團(tuan)隊將繼續深耕多模態風險內容識別領域，不斷(duan)優化“鷹(ying)眼”系(xi)統(tong)，為保障(zhang)網絡安(an)全(quan)、維護社會穩定貢(gong)獻(xian)更多力量。
版權所有? 188bet足球信息技術學院自動(dong)化(hua)系 皖ICP備05002528號
地(di)址：安徽省合肥市蜀山區黃山路443號(hao)，郵(you)政編碼：230026
