港大研究員提出融合自適應(yīng)法向量約束和遮擋注意力的深度估計(jì)新方法
下式顯示了優(yōu)化網(wǎng)絡(luò)的損失函數(shù),P(q)為位置q處的遮擋概率。損失函數(shù)綜合了遮擋概率作用下的深度、法向量以及遮擋概率圖,并用權(quán)重調(diào)節(jié)各部分的重要性:
實(shí)驗(yàn)結(jié)果
在模型訓(xùn)練過程中,研究人員使用了ScanNet作為訓(xùn)練數(shù)據(jù),并在7Scenes和SUND3D數(shù)據(jù)集上進(jìn)行了測試。訓(xùn)練過程首先對(duì)DepthNet進(jìn)行訓(xùn)練,而后固定其權(quán)重再訓(xùn)練RefineNet,最后再共同對(duì)整個(gè)模型進(jìn)行調(diào)優(yōu)。
下圖顯示了這種方法與多種深度估計(jì)方法在7-Scenes數(shù)據(jù)上的比較,可以看到針對(duì)多個(gè)指標(biāo)都取得了優(yōu)異的結(jié)果:
下圖顯示了模型重建的結(jié)果,可以看到深度圖中邊緣更為銳利、更好地保留了形狀的規(guī)則外形:
在得到的表面法向量上也達(dá)到了優(yōu)異性能:
在視覺質(zhì)量上也超過了其他方法,CNM約束可以更好的保留局部和全局的幾何結(jié)構(gòu)信息。
從最終的三維重建結(jié)果中可以看到,即便是對(duì)于像沙發(fā)、白墻這樣的弱紋理結(jié)構(gòu)也能輕松重建,重建的顏色也更接近于基準(zhǔn)、形狀更為連續(xù)噪聲也更少。
此外研究人員還分析了局域/全局法向量CNM、優(yōu)化模塊和遮擋概率圖等不同模塊的有效性:

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長度6~500個(gè)字
最新活動(dòng)更多
-
3月27日立即報(bào)名>> 【工程師系列】汽車電子技術(shù)在線大會(huì)
-
4月30日立即下載>> 【村田汽車】汽車E/E架構(gòu)革新中,新智能座艙挑戰(zhàn)的解決方案
-
5月15-17日立即預(yù)約>> 【線下巡回】2025年STM32峰會(huì)
-
即日-5.15立即報(bào)名>>> 【在線會(huì)議】安森美Hyperlux™ ID系列引領(lǐng)iToF技術(shù)革新
-
5月15日立即下載>> 【白皮書】精確和高效地表征3000V/20A功率器件應(yīng)用指南
-
5月16日立即參評(píng) >> 【評(píng)選啟動(dòng)】維科杯·OFweek 2025(第十屆)人工智能行業(yè)年度評(píng)選
推薦專題
- 1 UALink規(guī)范發(fā)布:挑戰(zhàn)英偉達(dá)AI統(tǒng)治的開始
- 2 北電數(shù)智主辦酒仙橋論壇,探索AI產(chǎn)業(yè)發(fā)展新路徑
- 3 降薪、加班、裁員三重暴擊,“AI四小龍”已折戟兩家
- 4 “AI寒武紀(jì)”爆發(fā)至今,五類新物種登上歷史舞臺(tái)
- 5 國產(chǎn)智駕迎戰(zhàn)特斯拉FSD,AI含量差幾何?
- 6 光計(jì)算迎來商業(yè)化突破,但落地仍需時(shí)間
- 7 東陽光:2024年扭虧、一季度凈利大增,液冷疊加具身智能打開成長空間
- 8 地平線自動(dòng)駕駛方案解讀
- 9 封殺AI“照騙”,“淘寶們”終于不忍了?
- 10 優(yōu)必選:營收大增主靠小件,虧損繼續(xù)又逢關(guān)稅,能否乘機(jī)器人東風(fēng)翻身?