艾睿光電紅外真彩轉(zhuǎn)換算法重磅升級(jí)!全新ROMA算法,應(yīng)用一種簡(jiǎn)單有效的交叉空間相似性匹配技術(shù),可充分利用夜間紅外數(shù)據(jù)的結(jié)構(gòu)知識(shí)生成真實(shí)、流暢的日間可見光視頻。這一技術(shù)的突破,將讓紅外熱成像在車載、安防、戶外等領(lǐng)域,擁有更多的應(yīng)用途徑和發(fā)揮空間。
全新技術(shù)
紅外真彩轉(zhuǎn)換算法ROMA
ROMA交叉空間相似性三重約束,全方位保障轉(zhuǎn)換升級(jí),視頻轉(zhuǎn)換更加清晰、流暢、穩(wěn)定:
基于VIT的多尺度區(qū)域判別器,讓轉(zhuǎn)換真實(shí)可靠,細(xì)節(jié)清晰,給人更真實(shí)的視覺體驗(yàn)。
時(shí)間的交叉空間相關(guān)性約束,實(shí)現(xiàn)視頻轉(zhuǎn)換時(shí)空一致,流暢不閃爍。
全局和局部的交叉空間相關(guān)性約束,訓(xùn)練更快更穩(wěn)定。
相關(guān)論文已被ACM MM2022接收
論文地址:https://arxiv.org/abs/2204.12367
代碼地址:https://github.com/BIT-DA/ROMA
ROMA算法原理框圖
熱成像&可見光
視頻流暢轉(zhuǎn)換
將夜間紅外的黑白世界轉(zhuǎn)化為日間人眼所見的世界,面臨重重困難和挑戰(zhàn):無法獲取的配對(duì)數(shù)據(jù)、不同的成像原理、不同的成像風(fēng)格、不同的場(chǎng)景等。ROMA算法幫助我們建立了翻譯的橋梁,從而可以跨越這些障礙,實(shí)現(xiàn)夜間熱成像向日間可見光的清晰流暢轉(zhuǎn)換。
更優(yōu)秀的轉(zhuǎn)換效果
更真實(shí)可靠的紅外真彩,更好的時(shí)空一致性,更流暢的視頻體驗(yàn),不閃爍不跳變。
效率/檢測(cè)/融合 三重升級(jí)
效率升級(jí):10倍+訓(xùn)練速度,極速工業(yè)部署
ROMA算法能夠極速完成模型訓(xùn)練,比F/LSeSim算法快11倍,助力紅外真彩快速落地各平臺(tái)和設(shè)備。
檢測(cè)升級(jí):更精準(zhǔn)的夜間檢測(cè),安全防護(hù)
轉(zhuǎn)換后目標(biāo)更清晰,檢測(cè)更精準(zhǔn),賦能ADAS,多重保障更安心。
融合升級(jí):更清晰的視頻融合
紅外真彩助力融合,加強(qiáng)夜間視覺,讓場(chǎng)景更清晰,讓融合無偽影,夜間觀察更流暢。
迄今最大的
雙光城市數(shù)據(jù)集開源
最新InfraredCity數(shù)據(jù)集,城市、高速公路和監(jiān)控場(chǎng)景下未配對(duì)的夜間紅外和日間可見光視頻,包含將近60萬幀圖像,比IRVI大20倍。
這是當(dāng)前針對(duì)日夜紅外真彩轉(zhuǎn)換領(lǐng)域,最大的開源雙光城市數(shù)據(jù)集,場(chǎng)景真實(shí)且豐富。艾睿光電愿與行業(yè)合作伙伴攜手,共同推動(dòng)紅外熱成像技術(shù)的發(fā)展和應(yīng)用,進(jìn)一步推動(dòng)行業(yè)繁榮發(fā)展。