河北大學(xué)網(wǎng)絡(luò)空間安全與計(jì)算機(jī)學(xué)院智能感知與人機(jī)交互團(tuán)隊(duì)彭錦佳（教師）、劉俊宇（學(xué)生）的最新研究成果“Bi-level Inter-modality Modulation for Unsupervised Visible-Infrared Person Re-Identification”被計(jì)算機(jī)安全領(lǐng)域頂級(jí)學(xué)術(shù)期刊IEEE Transactions on Information Forensics and Security（2026 CCF A）錄用發(fā)表。這是河北大學(xué)作為第一署名單位在無(wú)監(jiān)督跨模態(tài)行人重識(shí)別領(lǐng)域取得的重要科研成果，對(duì)于提升我校人工智能、信息安全學(xué)科的學(xué)術(shù)影響力與學(xué)科競(jìng)爭(zhēng)力具有重要作用。

研究團(tuán)隊(duì)長(zhǎng)期致力于計(jì)算機(jī)視覺(jué)領(lǐng)域跨模態(tài)行人重識(shí)別方向的研究，聚焦無(wú)監(jiān)督可見(jiàn)光-紅外行人重識(shí)別的核心難題展開(kāi)深入探索。無(wú)監(jiān)督可見(jiàn)光-紅外行人重識(shí)別任務(wù)的核心挑戰(zhàn)在于解決模態(tài)偏差帶來(lái)的跨模態(tài)語(yǔ)義對(duì)齊問(wèn)題，而現(xiàn)有方法在偽標(biāo)簽生成過(guò)程中過(guò)度依賴(lài)單模態(tài)信息，未充分挖掘跨模態(tài)關(guān)聯(lián)信息，難以有效彌合可見(jiàn)光與紅外圖像之間的模態(tài)鴻溝。針對(duì)上述關(guān)鍵問(wèn)題，團(tuán)隊(duì)提出了用于無(wú)監(jiān)督紅外-可見(jiàn)光重識(shí)別任務(wù)的雙級(jí)跨模態(tài)調(diào)制網(wǎng)絡(luò)。首先，通過(guò)構(gòu)建GrayMix中間模態(tài)，有效增強(qiáng)模型對(duì)顏色變化的魯棒性，大幅縮小可見(jiàn)光與紅外圖像間的模態(tài)差距。并且設(shè)計(jì)了三元組校準(zhǔn)融合模塊，精準(zhǔn)過(guò)濾跨模態(tài)聚類(lèi)匹配中的噪聲信息，構(gòu)建混合模態(tài)聚類(lèi)，建立可見(jiàn)光與紅外模態(tài)間的共享語(yǔ)義空間。此外，提出了跨模態(tài)鄰域一致性聚類(lèi)方法，通過(guò)篩選高置信度跨模態(tài)鄰域?qū)Σ⒕?xì)化特征距離，有效促進(jìn)跨模態(tài)聚類(lèi)的形成與傳播。

該課題組已在跨模態(tài)行人重識(shí)別、圖像修復(fù)、聯(lián)邦學(xué)習(xí)等人工智能和信息安全核心領(lǐng)域取得了一系列重要研究成果，相關(guān)工作先后發(fā)表在CVPR、TIFS、ICCV、TMM、ACM MM等國(guó)際權(quán)威學(xué)術(shù)期刊和會(huì)議上。

以上工作得到了國(guó)家自然科學(xué)基金、河北省自然科學(xué)基金、石家莊市駐冀高校基礎(chǔ)研究項(xiàng)目等項(xiàng)目的聯(lián)合資助。

論文鏈接：https://ieeexplore.ieee.org/document/11422041

（網(wǎng)絡(luò)空間安全與計(jì)算機(jī)學(xué)院、科學(xué)與技術(shù)創(chuàng)新研究院 供稿）