日前，CVPR 2022（Computer Vision and Pattern Recognition，計(jì)算機(jī)視覺(jué)與模式識(shí)別國(guó)際頂級(jí)會(huì)議）的多項(xiàng)挑戰(zhàn)賽結(jié)果正式出爐。好未來(lái)旗下美校智學(xué)云視覺(jué)團(tuán)隊(duì)憑借暗光下動(dòng)作識(shí)別和大氣擾動(dòng)文字圖像恢復(fù)等前沿技術(shù)，分別在UG2+挑戰(zhàn)賽中Semi-Superviced Action Recognition in  the Dark（暗光條件下的半監(jiān)督動(dòng)作識(shí)別）賽道、Atmospheric Turbulence Mitigation（圖像去湍流擾動(dòng)）賽道上，擊敗眾多國(guó)內(nèi)外團(tuán)隊(duì)，斬獲兩項(xiàng)國(guó)際冠軍。 

這是好未來(lái)繼榮獲CVPR2020和CVPR2021多項(xiàng)冠軍后，再次在該國(guó)際技術(shù)賽場(chǎng)上取得佳績(jī)。CVPR由IEEE電氣與電子工程師協(xié)會(huì)舉辦，是計(jì)算機(jī)視覺(jué)和模式識(shí)別領(lǐng)域最具影響力、內(nèi)容最全面的頂級(jí)A類學(xué)術(shù)會(huì)議之一。 

本次UG2+挑戰(zhàn)大賽由新加坡科技局資訊通信研究院（Institute for Infocomm Research, A*STAR, Singapore）、新加坡南洋理工大學(xué)(Singapore Nanyang Technological University)聯(lián)合舉辦，吸引了包括來(lái)自馬里蘭大學(xué)、中國(guó)科學(xué)院大學(xué)等在內(nèi)的眾多國(guó)內(nèi)外高校和研究機(jī)構(gòu)的上百支專業(yè)團(tuán)隊(duì)參加。 

Semi-Superviced Action Recognition in  the Dark挑戰(zhàn)賽要求識(shí)別暗光場(chǎng)景下視頻序列的動(dòng)作類別。由于在暗光環(huán)境下視覺(jué)特征相較正常環(huán)境下差異巨大，使用現(xiàn)有動(dòng)作識(shí)別算法不能有效工作，對(duì)識(shí)別算法與研究人員都是很大的挑戰(zhàn)。

為了應(yīng)對(duì)這些問(wèn)題，好未來(lái)美校事業(yè)部視覺(jué)團(tuán)隊(duì)結(jié)合了深度學(xué)習(xí)方法的數(shù)據(jù)處理方案，將暗光數(shù)據(jù)“去黑暗化”以及一系列的圖像處理技術(shù)與GAN技術(shù)，將正常的圖像（來(lái)自于HMDB51, K600等）實(shí)現(xiàn)“域”遷移，得到與黑暗圖像變亮效果類似的圖像。此外，該團(tuán)隊(duì)基于自監(jiān)督學(xué)習(xí)訓(xùn)練的視頻分類方法，充分挖掘視頻的時(shí)序關(guān)系和視覺(jué)特征，并通過(guò)自適應(yīng)的多輪次偽標(biāo)簽迭代訓(xùn)練的半監(jiān)督方法，取得91.33%的準(zhǔn)確率，奪得冠軍。 

 

 

圖：Semi-Superviced Action Recognition in the Dark挑戰(zhàn)賽最終前五名榜單,好未來(lái)位居第一

 

近一個(gè)世紀(jì)以來(lái)，人們對(duì)于光在介質(zhì)中擾動(dòng)和傳播進(jìn)行了大量研究。然而對(duì)于受大氣擾動(dòng)圖片的恢復(fù)、重建算法的研究卻進(jìn)展緩慢。Atmospheric Turbulence Mitigation挑戰(zhàn)賽旨在促進(jìn)相關(guān)算法的研究。

好未來(lái)（隊(duì)伍名：Summer）在該競(jìng)賽中使用Restormer模型用于圖像重建。利用擾動(dòng)圖片之間存在空間關(guān)聯(lián)的特性，采用多幀輸入，充分學(xué)習(xí)、提取不同幀之間的空間特征，使最終端到端圖像重建效果顯著提升。另外，結(jié)合NIMA模塊，使得pipeline能適用于不同場(chǎng)景。最終，以重建后圖像字準(zhǔn)98.53%的絕對(duì)優(yōu)勢(shì)奪魁。

  

Atmospheric Turbulence Mitigation挑戰(zhàn)賽最終前五名榜單，好未來(lái)位居第一

 

好未來(lái)美校智學(xué)云的前身為好未來(lái)AI研究院，是國(guó)內(nèi)教育領(lǐng)域較早進(jìn)行AI技術(shù)研究與落地探索的研究機(jī)構(gòu)。經(jīng)過(guò)近5年的沉淀，好未來(lái)美校智學(xué)云不斷取得前沿核心技術(shù)突破，涉及圖像與視頻理解、機(jī)器學(xué)習(xí)、自然語(yǔ)言理解、語(yǔ)音合成與評(píng)測(cè)等多個(gè)領(lǐng)域，面向行業(yè)開(kāi)放了視覺(jué)、語(yǔ)音、NLP和數(shù)據(jù)挖掘等領(lǐng)域的100余項(xiàng)AI能力，提供智能批改、智能評(píng)測(cè)、虛擬形象、內(nèi)容生產(chǎn)和教學(xué)管理等方面的AI解決方案，累計(jì)獲得包括CVPR2020競(jìng)賽、CVPR2021競(jìng)賽、ICCV2021競(jìng)賽、UbiComp2020競(jìng)賽、NeurIPS2020“教育挑戰(zhàn)”競(jìng)賽、CCL 2020幽默計(jì)算評(píng)測(cè)、INTERSPEECH 2021“非母語(yǔ)兒童識(shí)別”競(jìng)賽在內(nèi)的十余項(xiàng)國(guó)內(nèi)外競(jìng)賽冠軍，發(fā)表70多篇高水平學(xué)術(shù)論文，獲得190余項(xiàng)專利。