香港大學(xué)等機(jī)構(gòu)提出學(xué)習(xí)點(diǎn)云內(nèi)蘊(yùn)結(jié)構(gòu)表示的非監(jiān)督學(xué)習(xí)新方法
在此基礎(chǔ)上,研究人員利用了生成的結(jié)構(gòu)點(diǎn)集與輸入點(diǎn)云間的Chamfer距離作為模型的重建約束,使得生成的結(jié)構(gòu)點(diǎn)在空間上盡可能地靠近輸入點(diǎn)云結(jié)構(gòu):
值得注意的是,在模型的訓(xùn)練過(guò)程中并沒(méi)有顯式地對(duì)結(jié)構(gòu)點(diǎn)的語(yǔ)義連續(xù)性進(jìn)行約束,但模型卻依然能夠針對(duì)每一類形狀生成具有語(yǔ)義連續(xù)性的概率圖,得到了具有語(yǔ)義連續(xù)性的結(jié)構(gòu)點(diǎn),下圖顯示了這種針對(duì)同一類形狀所具備的語(yǔ)義連續(xù)性:
不同目標(biāo)形狀間的語(yǔ)義連續(xù)性。同一類別的不同點(diǎn)云形狀得到了語(yǔ)義一致的結(jié)構(gòu)點(diǎn),其中一三行是16個(gè)結(jié)構(gòu)點(diǎn),二四行是1024個(gè)結(jié)構(gòu)點(diǎn),所表達(dá)的結(jié)構(gòu)都具有表示顏色較為一致的語(yǔ)義特征,圖中也顯示了模型可以連續(xù)生成稀疏或稠密結(jié)構(gòu)點(diǎn)的能力。
實(shí)驗(yàn)結(jié)果
為了驗(yàn)證模型的有效性,研究人員在ShapeNet和BHCP數(shù)據(jù)集上進(jìn)行了訓(xùn)練和驗(yàn)證,并采用了最遠(yuǎn)點(diǎn)采樣的方法從三維形狀中進(jìn)行點(diǎn)云采樣。研究人員使用PointNet++從兩個(gè)不同層次抽取了512和128個(gè)聚類中心,并最終得到128個(gè)采樣點(diǎn)、每個(gè)點(diǎn)包含640維的局域上下文特征。在點(diǎn)云集成模塊中,多層感知機(jī)層次的數(shù)量由輸出的結(jié)構(gòu)點(diǎn)數(shù)量決定。例如一個(gè)生成512個(gè)結(jié)構(gòu)點(diǎn)的3層多層感知機(jī)包含了(640,512,512)神經(jīng)元,針對(duì)每個(gè)類別在單個(gè)1080TiGPU上訓(xùn)練需要耗時(shí)一小時(shí)左右。
為了測(cè)評(píng)結(jié)構(gòu)點(diǎn)在不同目標(biāo)間的連續(xù)性,研究人員在BHCP數(shù)據(jù)集上測(cè)試了三維形狀語(yǔ)義對(duì)應(yīng)任務(wù),并與其他方法進(jìn)行了比較。下圖顯示了本方法與其他方法在語(yǔ)義對(duì)應(yīng)任務(wù)上針對(duì)不同類別的精度,其中紅色線代表了本文提出的方法顯著超過(guò)了先前方法的精度:
此外研究人員還在語(yǔ)義標(biāo)簽遷移任務(wù)上對(duì)模型產(chǎn)生結(jié)構(gòu)點(diǎn)的質(zhì)量進(jìn)行測(cè)評(píng),值得注意的是本文的方法在訓(xùn)練時(shí)沒(méi)有采用任何標(biāo)注。在使用時(shí),利用與測(cè)試點(diǎn)最近的結(jié)構(gòu)點(diǎn)序列來(lái)進(jìn)行語(yǔ)義標(biāo)注遷移,下圖顯示了模型在三個(gè)樣本上進(jìn)行遷移的結(jié)果,其中綠色代表了八個(gè)隨機(jī)樣本的平均IOU,均值和中值用紅色和藍(lán)色顯示。
下圖還顯示了語(yǔ)義標(biāo)簽遷移任務(wù)的結(jié)果,其中藍(lán)色框中是樣本形狀,其他則表示遷移的結(jié)果:
此外研究人員還利用PCA的方法結(jié)合結(jié)構(gòu)點(diǎn)構(gòu)建了嵌入空間,下圖顯示了形狀隨兩個(gè)主成分變化3σ的情況,右側(cè)顯示了僅僅由50個(gè)主成分構(gòu)建的結(jié)果,很好地還原了點(diǎn)云所代表的形狀:

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字
最新活動(dòng)更多
-
3月27日立即報(bào)名>> 【工程師系列】汽車電子技術(shù)在線大會(huì)
-
4月30日立即下載>> 【村田汽車】汽車E/E架構(gòu)革新中,新智能座艙挑戰(zhàn)的解決方案
-
5月15-17日立即預(yù)約>> 【線下巡回】2025年STM32峰會(huì)
-
即日-5.15立即報(bào)名>>> 【在線會(huì)議】安森美Hyperlux™ ID系列引領(lǐng)iToF技術(shù)革新
-
5月15日立即下載>> 【白皮書(shū)】精確和高效地表征3000V/20A功率器件應(yīng)用指南
-
5月16日立即參評(píng) >> 【評(píng)選啟動(dòng)】維科杯·OFweek 2025(第十屆)人工智能行業(yè)年度評(píng)選
推薦專題
- 1 UALink規(guī)范發(fā)布:挑戰(zhàn)英偉達(dá)AI統(tǒng)治的開(kāi)始
- 2 北電數(shù)智主辦酒仙橋論壇,探索AI產(chǎn)業(yè)發(fā)展新路徑
- 3 降薪、加班、裁員三重暴擊,“AI四小龍”已折戟兩家
- 4 “AI寒武紀(jì)”爆發(fā)至今,五類新物種登上歷史舞臺(tái)
- 5 國(guó)產(chǎn)智駕迎戰(zhàn)特斯拉FSD,AI含量差幾何?
- 6 光計(jì)算迎來(lái)商業(yè)化突破,但落地仍需時(shí)間
- 7 東陽(yáng)光:2024年扭虧、一季度凈利大增,液冷疊加具身智能打開(kāi)成長(zhǎng)空間
- 8 地平線自動(dòng)駕駛方案解讀
- 9 封殺AI“照騙”,“淘寶們”終于不忍了?
- 10 優(yōu)必選:營(yíng)收大增主靠小件,虧損繼續(xù)又逢關(guān)稅,能否乘機(jī)器人東風(fēng)翻身?