如視宣布,面向?qū)W術(shù)研究及非商業(yè)用途正式開放10000套室內(nèi)三維數(shù)據(jù)集 Realsee3D——這或是全球目前最大規(guī)模的空間三維數(shù)據(jù)集,旨在為空間智能領(lǐng)域的研究者、開發(fā)者提供高質(zhì)量數(shù)據(jù)基礎(chǔ),加速整個(gè)行業(yè)的技術(shù)迭代與應(yīng)用落地。

Realsee3D

此前,如視發(fā)布空間深度推測(cè)大模型 Argus1.0。作為首個(gè)支持全景圖輸入的空間深度推測(cè)大模型,Argus1.0依托如視所積累的千萬級(jí)三維空間數(shù)據(jù)庫訓(xùn)練而成。而此次開放的 Realsee3D三維數(shù)據(jù)集,正是從這一海量數(shù)據(jù)庫中精選出的高質(zhì)量樣本。

數(shù)據(jù)集優(yōu)勢(shì)

Realsee3D 是一個(gè)大規(guī)模多視角RGB-D數(shù)據(jù)集,旨在推動(dòng)室內(nèi)三維感知、重建與場(chǎng)景理解領(lǐng)域的研究。該數(shù)據(jù)集具有以下優(yōu)勢(shì)特征:

No.1超大規(guī)模  

- 10,000個(gè)獨(dú)特的室內(nèi)三維場(chǎng)景

- 95,962個(gè)細(xì)分房間單元

- 299,073組視點(diǎn)/RGB-D 圖像對(duì)

No.2完備標(biāo)注  

為了賦能多任務(wù)學(xué)習(xí)(Multi-task Learning),我們提供了詳盡的 ground truth 標(biāo)注,不僅限于視覺,更延伸至幾何與語義:

- 幾何層:提供高精度 CAD 圖紙與平面圖。

- 語義層:包含 2D語義分割與3D檢測(cè)標(biāo)簽。

No.3場(chǎng)景多樣

為了確保模型在復(fù)雜現(xiàn)實(shí)環(huán)境中的魯棒性,我們采用了“真實(shí)數(shù)據(jù)+程序化生成”的雙引擎策略:

- 采集數(shù)據(jù):1,000 個(gè)真實(shí)場(chǎng)景(捕捉現(xiàn)實(shí)物理世界的復(fù)雜光照、布局與生活痕跡)

- 合成數(shù)據(jù):9,000 個(gè)合成場(chǎng)景(基于 100+專業(yè)設(shè)計(jì)師 精心搭配的風(fēng)格模板,涵蓋海量家具模型與裝修風(fēng)格)

數(shù)據(jù)類型

• 彩色全景圖 

• 深度圖

• 位姿

• CAD圖紙 

• 戶型平面圖 

• 語義分割標(biāo)簽

• 3D物體檢測(cè)標(biāo)簽

彩色全景圖

深度圖

表面法線

語義分割圖

適用方向

一直以來,空間智能領(lǐng)域的研究與應(yīng)用面臨著一個(gè)卡脖子難題:高質(zhì)量的空間數(shù)據(jù)始終存在巨大缺口。如視憑借在三維空間數(shù)據(jù)領(lǐng)域的技術(shù)積累與資源沉淀,正填補(bǔ)了這一缺口。

本數(shù)據(jù)集適用于幾何重建、多模態(tài)學(xué)習(xí)、具身智能等空間智能核心研究方向。歡迎全球研究者、開發(fā)者下載使用 Realsee3D三維數(shù)據(jù)集,共同探索空間智能研究的未來邊界。

獲取方式

目前,Realsee3D 數(shù)據(jù)集已通過官方渠道開放申請(qǐng),訪問如視 GitHub 倉庫即可獲取。