針對(duì)上述問題，本文提出一種基于橋梁模板對(duì)齊與多階段特征學(xué)習(xí)的光場(chǎng)角度重建方法將視點(diǎn)層視為稀疏橋梁模板，模型通過單次訓(xùn)練即可從不同稀疏橋梁模板中重建完整光場(chǎng)圖像。提出一種橋梁模板對(duì)齊操作，結(jié)合獨(dú)特的訓(xùn)練策略能夠提高光場(chǎng)重建方法針對(duì)不同稀疏橋梁模板的重建能力。設(shè)計(jì)了多階段的特征學(xué)習(xí)，以微透鏡陣列級(jí)一子孔徑級(jí)的特征學(xué)習(xí)策略來處理不同輸入的稀疏橋梁模板。將融合子孔徑特征映射為卷積核組以及偏置圖，結(jié)合輸入的光場(chǎng)圖像合成任意角度位置的子孔徑圖像。實(shí)驗(yàn)結(jié)果表明，所提方法能有效地參考不同稀疏橋梁模板以靈活地重建任意角度位置的子孔徑圖像，且所提訓(xùn)練模式能有效地應(yīng)用于其它光場(chǎng)圖像超分辨率重建方法以提升其處理不同角度稀疏橋梁模板的能力。
角度重建(LFAR-TAF)給定一個(gè)低角度分辨率光場(chǎng)圖像LLR其中UxV表示其角度分辨率，SxT則為空間分辨率。通過固定角度位置光場(chǎng)圖像的形式可以轉(zhuǎn)換為子孔徑圖像I。所提方法旨在從輸入的稀疏采樣的光場(chǎng)圖像中重建出任意角度位置上的子孔徑圖像，具體而言，對(duì)于輸入稀疏采樣的光場(chǎng)圖像和重建的目標(biāo)角度位置ptar，該過程表示為表示目標(biāo)角度位置上的子孔徑圖像;為所提出的光場(chǎng)超分辨率重建方法。
圖I為所提出的基于橋梁模板對(duì)齊與多階段特征學(xué)習(xí)的光場(chǎng)角度重建網(wǎng)絡(luò)總體框架，主要包括橋梁模板對(duì)齊、微透鏡陣列圖像特征提取、子孔徑級(jí)特征融合、至目標(biāo)角度位置的特征映射以及目標(biāo)角度位置的子孔徑圖像合成等幾個(gè)部分。首先，將輸入的光場(chǎng)稀疏橋梁模板對(duì)應(yīng)圖像進(jìn)行橋梁模板對(duì)齊以獲取相應(yīng)的微透鏡陣列圖像。其次，在獲取的微透鏡陣列圖像上進(jìn)行光場(chǎng)特征提取。之后，將微透鏡陣列圖像特征重組后進(jìn)行子孔徑級(jí)的特征融合，以整合各角度位置上光場(chǎng)信息。通過特征映射模塊將子孔徑級(jí)的融合特征與目標(biāo)角度位置結(jié)合，以映射生成若干組卷積核權(quán)重。最后，通過所生成的卷積核權(quán)重與輸入視點(diǎn)層中的各子孔徑圖像進(jìn)行像素級(jí)卷積并加權(quán)重構(gòu)成最終的子孔徑圖像。http://www.czscsmjs.com/
