您現在的位置是:首頁 > 舞蹈首頁舞蹈

幾張圖片生成3D模型?距離真正的AI建模還有多遠?

由 博雅弘拓 發表于 舞蹈2023-01-16
簡介如果是這樣,建議大家試試易模,研發團隊基於在視覺AI領域20多年的積累,設計了這款泛在於Android與iOS系統的移動端輕量化3D建模應用,內建模型編輯功能,讓任何人都可以在手機端觸屏編輯3D模型,還提供多種檔案匯出方式和格式,滿足將模型

迭代的目的是什麼

時間溯回,早在2017年,美圖秀秀就曾引入人工智慧美化人像而被谷歌譽為“最佳娛樂App”。智慧技術奔騰發展,今年的AIGC技術可謂在各行各業大放異彩,從AI繪畫、AI寫作到AI配音,人工智慧技術自動生成內容已經成為繼UGC、PGC之後的一種新型內容生產方式。

在AI-GC的背後,AI生成工具在每個迭代階段流出的產品,總能引發一波“人類下崗”熱議。本文就從現階段人們對AI內容生產的使用情況,聊聊AI讓我們“慌”在哪裡?

1、AI繪畫:“馴服”之前,需要接受隨機性?

現在,除了意間繪畫小程式和draft。art網站,如美圖秀秀、美顏相機這種紮根於美化人像的軟體也立刻釋放了AI繪畫功能。

幾張圖片生成3D模型?距離真正的AI建模還有多遠?

各個社交平臺上湧現出大量使用AI繪製的影像。使用AI繪畫,要輸入一些限定語。很多網友表示,如果想讓AI參考上傳的照片/圖片畫出…不離譜的作品,需要贅述大量“關鍵詞”。

例如:大師之作,極高解析度,完成度極高,等等(先寫20個試試效果),同時還要很清楚地描述參考圖,在此基礎上,還需接受隨機性有機率得到一片混沌。

看到各大社交平臺的曬圖,有精美的,也不乏一不小心漏掉什麼描述,讓AI把情侶合影直接變成兩位花臂大哥的、無中生“友”的。

幾張圖片生成3D模型?距離真正的AI建模還有多遠?

大家很開心地看到AI將自己的愛寵擬繪成人,但看到自己精緻形象照被AI畫成牧羊犬、哈士奇,甚至靠背椅、牆紙貼畫……雖無法欣然接受,但也紛紛曬到社交媒體中取樂一下——大家似乎很快習慣了AI繪畫這個專案,預設在“馴服AI”之前需要接受AI的隨機性。

2、AI建模:會讓建模師下崗?

最近讓建模師比較關注的AI工具當屬英偉達(NVIDIA)推出的Magic3D,基於文字描述自動生成3D模型。據說只需要輸入一段文字,AI就能生成出一隻色澤、紋理、造型俱全的3D模型。

比如,“一隻坐在睡蓮上的藍色箭毒蛙”就可以生成如下結果。

幾張圖片生成3D模型?距離真正的AI建模還有多遠?

據悉,這一結果耗時大約40分鐘(這個生成速度已經比之前的DreamFusion快2倍)。Magic3D還可以執行基於提示的3D網格編輯,只需要修改文字提示,就能夠立即生成新的3D模型。

看到這個最終成品,各位模型師朋友是不是鬆了口氣?雖說模型特徵算得上有模有樣,不過這個小青蛙的樣子依然帶有隨機性。事實就是如此:

如果沒有限定詞,AI生成的模型隨機性會更大;如果增加多個限定詞,那麼隨機性堆積出的事物會與你想要設計的目標相去更遠。

所以說至少目前,各個領域中依然需要能夠“指哪打哪”的優秀設計師。

有關Magic3D,另一個進步點是質量。據說,Magic3D使用監督方法可合成8倍高解析度的3D內容。具體來說普通的使用者朋友有可能不太好理解,Magic3D用一種“從粗到精”的最佳化方法,使用多種不同解析度下的多個擴散先驗來最佳化3D表徵,從而生成檢視一致的集合形狀及高解析度細節,以生成高保真的3D內容,同時很容易在主流的圖形軟體中匯入和視覺化。

可是,問題也來了,AI生成的小青蛙最多能代表存在這樣的物種,可是並不存在這樣一隻小蛙,對於現實生活中並不存在的客觀事物,怎樣才算是“高保真”呢?

3、什麼是真正的高保真三維模型?AI建模還有哪些必經之路?

截至目前,AI繪畫、AI建模做的都是人類做過的事情,我們就深入說說3D建模。

我們經常提到的建模有三種:數學建模、實景建模、原生建模。數學模型不是我們要討論的事情,而另外兩種,實景建模基於現實生活中已經存在的物品,逆向工程實現三維數字化,作為模型使用的時候要求的是尺寸顏色甚至質感的高度還原;原生建模是創造現實生活中尚不存在事物,上文中的小青蛙是本不存在的,還有就是從零開始設計各種物品也算。

而這兩種模型結果最終的使用方向,無外乎兩種:用在現實世界中;用在虛擬空間中。(如下圖所示,三維設計涉及人們生活中的方方面面)

幾張圖片生成3D模型?距離真正的AI建模還有多遠?

最終使用在現實生活中的三維模型,例如造車、玩具設計,最終都要透過3D列印或者批次生產做出實實在在的物品;用在虛擬空間中的模型,也與近兩年比較火的元宇宙話題密不可分,比方說商品的網頁展示、動畫人物設計。 要說二者區別,例如在影視領域,演員手持的道具就是需要3D打印出來的;角色背後的現實生活中完全不存在的場景,就只需出現在虛擬空間中。當然如果說要開一個影片釋出會,現場需要透過實景還原出經典場景,這也需要製作出實際物品。 既然製作3D模型的起點和最終使用場景各不相同,那麼就可以有不同的方法來提升各自的效率。

在無實物領域,大家看到了,AI可以製作一個沒有角色設定、沒有目標的小青蛙,但如果你想用這樣的AI替代從繪畫到模型的過程是不現實的。

例如,動畫作品《哈爾的移動城堡》。

幾張圖片生成3D模型?距離真正的AI建模還有多遠?

動畫中的城堡並不是標準意義的西方古堡,更像一個把人類起居駝在了身上的昆蟲。假設已經還原了內部客廳、壁爐、浴室、臥室等房間在空間上與外觀的一一對應,並且讓AI事先學習“移動城堡”的建築原型,但是讓還在學習理解客觀事物的AI接受這個“城堡”是靠一團有意志的火焰來驅動,並且擁有細細的腿腳,是不是有點勉為其難?

同時,現在的AI只是單一領域的工具,例如城堡內部在搬家後的幾次結構變化就依然需要人工配置才能體現出作者與導演本身的設計,視情況可能需要大量的人工限定和人工操作。所以說,讓3D建模AI在一些領域可控到可以實現創作者原本意圖還有很長的路要走(目測跨界餵養,需要大量資料)。

而如果從實物出發去製作模型,因為不需要手繪技能,相對來說更容易讓無基礎的人來上手。

我們知道,華為推出了建模服務,將AI建模體驗帶給了非專業的普通使用者(華為使用者)。蘋果公司也在pro系手機/平板中內建LiDAR鐳射雷達。不過,由於系統的原因,得到的模型尚不能直接以檔案的形式匯出使用。那這是不是太遺憾了?連博雅仔都想說一句不以匯出使用為目的的三維建模都是浪費感情!

如果是這樣,建議大家試試易模,研發團隊基於在視覺AI領域20多年的積累,設計了這款泛在於Android與iOS系統的移動端輕量化3D建模應用,內建模型編輯功能,讓任何人都可以在手機端觸屏編輯3D模型,還提供多種檔案匯出方式和格式,滿足將模型匯出至標準圖形軟體二次設計的需求,讓專業使用者三維處理效率更高,讓非專業的普通手機使用者均可快速上手體驗一鍵式智慧三維創作。

幾張圖片生成3D模型?距離真正的AI建模還有多遠?

易模擁有五種建模模式(場景/主體/人臉/人像/器物),均為一鍵拍攝取樣+AI建模模式。

使用者可上傳滿足條件的照片組或影片進行建模,也可以直接使用易模拍攝實物進行建模。其中的器物模式可製作無底面的模型或者有底的全息3D模型,還有不同拍攝取樣方法以滿足不同場景下的檔案需求、得到更高標準的三維模型。

易模生成的模型均是根據拍攝到的影像來生成的,AI所見,即為模型所得。模型1:1依託實物而生,顏色根據實拍獲得,貼圖解析度根據影像資料決定,易模App真正做到實物尺寸可量測、實現真正意義的高保真。

縱然原生領域的AI建模還有很長的路要走,但是依託實景的AI建模已經在3D列印、工業設計、真人手辦、元宇宙相關等各個領域迎來突出表現。