近日, 由CVPR主辦的MAI(Mobile AI Workshop)分會(huì)近期在線上舉行。作為圖像領(lǐng)域最具影響力的賽事之一,本屆MAI 2021挑戰(zhàn)賽由華為、OPPO、MTK、SAMSUNG、蘇黎世理工共同主辦。參賽隊(duì)伍聚集了華為、百度、商湯、Horizon等國內(nèi)外頂尖AI團(tuán)隊(duì)。大華股份圖像算法部dh_isp 團(tuán)隊(duì)提出的輕量化網(wǎng)絡(luò)一舉摘得ISP賽道冠軍,充分展示了大華在圖像增強(qiáng)領(lǐng)域的開拓創(chuàng)新的實(shí)力。
不同于部署于云端,由于存儲(chǔ)空間、功耗及算力資源限制,神經(jīng)網(wǎng)絡(luò)模型在移動(dòng)設(shè)備和嵌入式設(shè)備上的存儲(chǔ)與計(jì)算是一個(gè)巨大的挑戰(zhàn)。輕量化網(wǎng)絡(luò)旨在保持模型精度基礎(chǔ)上進(jìn)一步減少模型參數(shù)量和復(fù)雜度。輕量化網(wǎng)絡(luò)既包含了對(duì)網(wǎng)絡(luò)結(jié)構(gòu)的探索,又有例如知識(shí)蒸餾、剪枝等模型壓縮技術(shù)的運(yùn)用,推動(dòng)深度學(xué)習(xí)技術(shù)在移動(dòng)端,嵌入式的應(yīng)用落地,在智能家居、安防、自動(dòng)駕駛、智慧海洋等領(lǐng)域都有重要貢獻(xiàn)。
Learned Smartphone ISP Challenge競(jìng)賽致力于促進(jìn)業(yè)內(nèi)使用深度學(xué)習(xí)的方法替代傳統(tǒng)ISP模塊,對(duì)相機(jī)獲得的RAW數(shù)據(jù)直接轉(zhuǎn)換為RGB圖像,以獲得更好的成像效果,同時(shí)也能夠解決傳統(tǒng)ISP模塊依賴大量人工經(jīng)驗(yàn)調(diào)參的難題。
在大賽中,大華dh_isp團(tuán)隊(duì)基于自身在ISP領(lǐng)域的積累,通過深入分析任務(wù)的特點(diǎn)和痛點(diǎn),提出一款高效、高性能的網(wǎng)絡(luò),網(wǎng)絡(luò)設(shè)計(jì)立足于圖像重建任務(wù)特性,并基于圖像任務(wù)采取了特殊的損失函數(shù)和訓(xùn)練方式,使網(wǎng)絡(luò)在耗時(shí)最小的情況下,獲得很好的主觀效果,在綜合排名中,以明顯的優(yōu)勢(shì)獲得桂冠,彰顯了大華圖像成像、圖像增強(qiáng)、輕量化網(wǎng)絡(luò)設(shè)計(jì)等領(lǐng)域的技術(shù)積累及開拓創(chuàng)新能力。
據(jù)了解,大華股份作為智慧物聯(lián)行業(yè)頭部企業(yè),深耕ISP技術(shù)近十年,多年的產(chǎn)品迭代使大華的ISP團(tuán)隊(duì)積累了深厚的技術(shù)功底。伴隨著AI相關(guān)技術(shù)的蓬勃發(fā)展,如何利用AI進(jìn)行底層(low-level)圖像處理以帶來更好的圖像質(zhì)量深受行業(yè)研究關(guān)注。AI+降噪、插值、去模糊、超分辨率,乃至于AI+ISP在研究、競(jìng)賽中都帶來了顯著的進(jìn)步。大華圖像算法團(tuán)隊(duì)立足于自身在傳統(tǒng)ISP領(lǐng)域的技術(shù)積累,開發(fā)了全圖以及感興趣區(qū)域的AISP圖像處理技術(shù),進(jìn)一步提升了圖像效果,為終端用戶提供更優(yōu)異的視覺體驗(yàn)。