首頁即時(shí)動(dòng)態(tài) 攻堅(jiān)三維重建群核科技這項(xiàng)成果入選ICCV 2023

攻堅(jiān)三維重建群核科技這項(xiàng)成果入選ICCV 2023

來源：家居百科時(shí)間：2023年08月25日 15:24

在全屋定制行業(yè)場(chǎng)景中，CAD圖紙是設(shè)計(jì)方案重要的呈現(xiàn)方式。而門店設(shè)計(jì)師完成的CAD圖紙到了生產(chǎn)和施工端，機(jī)器無法直接識(shí)別，往往需要人工將CAD圖紙包含的設(shè)計(jì)語言轉(zhuǎn)化成三維模型，再進(jìn)一步生成可供生產(chǎn)線加工的數(shù)據(jù)，這對(duì)數(shù)據(jù)準(zhǔn)確性、拆單效率和工廠產(chǎn)能帶來了很大的影響。

為了解決這一難題，群核科技近幾年一直專注于利用AI實(shí)現(xiàn)三維建模的研究。近日，群核科技與中山大學(xué)、電子科技大學(xué)等學(xué)術(shù)機(jī)構(gòu)合作的一篇題為《PlankAssembly: Robust 3D Reconstruction from Three Orthographic Views with Learnt Shape Programs》的論文被國際計(jì)算機(jī)視覺大會(huì)（ICCV）接收。ECCV與ICCV、CVPR共稱為計(jì)算機(jī)視覺領(lǐng)域三大國際頂ji學(xué)術(shù)會(huì)議。

項(xiàng)目主頁：https://manycore-research.github.io/PlankAssembly

本篇論文研究了計(jì)算機(jī)輔助設(shè)計(jì)中一個(gè)長(zhǎng)期存在的難題：從三視圖中重建三維模型。傳統(tǒng)算法通過建立二維圖紙與三維模型之間的顯式關(guān)系來解決這一問題。經(jīng)實(shí)驗(yàn)表明，傳統(tǒng)算法對(duì)于圖紙錯(cuò)誤十分敏感，這也限制了這類算法在實(shí)際產(chǎn)品中的應(yīng)用。目前，有同行嘗試通過幾何識(shí)別的方式，識(shí)別長(zhǎng)度、寬度等2D信息，但只能做到簡(jiǎn)單的CAD模型重建。

為了解決算法對(duì)圖紙錯(cuò)誤的敏感性問題，群核科技嘗試?yán)肁I深度學(xué)習(xí)算法，基于數(shù)據(jù)驅(qū)動(dòng)的手段來緩解這一問題。具體地，本研究采用自注意力機(jī)制來進(jìn)行隱式建模，通過在包含超2.6萬個(gè)參數(shù)化CAD模型的數(shù)據(jù)集進(jìn)行訓(xùn)練，可以自動(dòng)將三個(gè)正交視圖中的二維線條圖轉(zhuǎn)換成三維CAD模型。與傳統(tǒng)算法相比，我們的提出的算法對(duì)噪聲的魯棒性有顯著提升。

更重要的是，一般而言，重建的物體都不能編輯，但本研究重建了板件之間的聯(lián)動(dòng)關(guān)系，以實(shí)現(xiàn)對(duì)重建柜體的可編輯效果。

基于群核科技提出的算法研究為業(yè)界提供三維建模的新思路，本研究得到了浙江省2022年度重點(diǎn)研發(fā)項(xiàng)目的支持。