AI技術的研究正在從2D走向更高難度的3D。12月3日,記者獲悉,阿里技術團隊研發(fā)了全新3D AI算法,可基于2D圖片精準搜索出相應的3D模型,準確率大幅提升10%,可降低3D打印、VR看房、場景導購等領域的門檻。該研究成果已被AI頂會NeurIPS 2020收錄。
盡管3D打印、VR等應用場景逐漸成熟,但以3D搜索為代表的3D智能技術依舊處于早期研究階段。例如,受限于2D圖片顏色、紋理信息和3D模型形狀信息之間的差異,傳統(tǒng)AI方法模型匹配的準確率較低。過去幾年,包括卡耐基梅隆大學、MIT、斯坦福大學等頂級機構都紛紛投入該領域的研究。
(阿里3D AI算法可基于2D圖片,從海量數(shù)據(jù)集中精準找到匹配的3D模型)
國際AI頂會NeurIPS 2020官方顯示,阿里技術團隊率先提出了3D搜索的全新方法,即讓AI先學習大量復雜2D圖片樣本,從而弱化紋理等干擾信息,使AI網(wǎng)絡更聚焦于幾何細節(jié)的學習,從而讓AI更好地理解2D圖片及3D模型之間的差異。
實驗結果顯示,訓練完成后的算法模型能更高效地和3D模型數(shù)據(jù)集進行匹配,在不同數(shù)據(jù)集上的準確率提高約10%,例如用一張家具照片,可直接找到該家具的3D模型。
該論文作者、阿里淘系技術算法專家付歡表示,“3D搜索和3D重建、3D顯示都是3D領域基礎技術, 未來,隨著算法和3D數(shù)據(jù)集的不斷強大,通過搜索引擎可以搜索出萬物的3D模型。”
據(jù)悉,阿里技術團隊在3D重建、3D搜索等技術領域已實現(xiàn)多項突破,相關技術已應用在淘寶3D購、躺平設計家等場景中。今年3月,阿里巴巴與多所國際知名學者合作開源業(yè)界首個飽含紋理細節(jié)的大型3D家具數(shù)據(jù)集(3D-FUTURE),吸引了斯坦福大學、加州大學伯克利分校、清華大學、香港中文大學等高校及蘋果、Facebook等企業(yè)進行學術和應用的前沿研究。
責任編輯:PSY
-
3D
+關注
關注
9文章
2980瀏覽量
113351 -
AI
+關注
關注
88文章
37303瀏覽量
292273 -
阿里
+關注
關注
6文章
462瀏覽量
33955
發(fā)布評論請先 登錄
技術資訊 I 圖文詳解 Allegro X PCB Designer 中的 3D 模型映射
玩轉 KiCad 3D模型的使用
iTOF技術,多樣化的3D視覺應用
索尼與VAST達成3D業(yè)務合作
TechWiz LCD 3D應用:局部液晶配向
HT 可視化監(jiān)控頁面的 2D 與 3D 連線效果
一種以圖像為中心的3D感知模型BIP3D
使用海爾曼太通/HellermannTyton 3D CAD 模型進行快速高效的設計
TechWiz LCD 3D應用:局部液晶配向
SciChart 3D for WPF圖表庫
騰訊混元3D AI創(chuàng)作引擎正式發(fā)布
騰訊混元3D AI創(chuàng)作引擎正式上線
AN-1249:使用ADV8003評估板將3D圖像轉換成2D圖像

阿里研發(fā)全新3D AI算法,2D圖片搜出3D模型
評論