最新人工智能模型,讓二維圖片秒變?nèi)S場景

AI時(shí)代前沿
幾年來,研究人員一直在改進(jìn)這種2D到3D模型,在完成的渲染中添加更多的細(xì)節(jié),并提高渲染速度。英偉達(dá)表示,其新的即時(shí)NeRF模型是目前開發(fā)的最快模型之一,它將渲染時(shí)間從幾分鐘縮短到“幾乎立即”完成。

英偉達(dá)最新的人工智能演示令人印象非常深刻:這是一個(gè)可以快速將幾十張2D快照轉(zhuǎn)換成3D渲染場景的工具。在下面的視頻中,你可以看到這個(gè)方法的實(shí)際應(yīng)用,一個(gè)模特穿著安迪·沃霍爾(Andy Warhol)的衣服,手里拿著一臺(tái)老式的寶麗來相機(jī)。

該工具被稱為即時(shí)NeRF(Instant NeRF)。NeRF指的是“神經(jīng)輻射場”(Neural Radiance Fields”)——一項(xiàng)由加州大學(xué)伯克利分校、谷歌研究中心和加州大學(xué)圣地亞哥分校的研究人員在2020年開發(fā)的技術(shù)。簡而言之,該方法映射不同2D鏡頭的顏色和光強(qiáng),然后生成數(shù)據(jù),從不同的角度連接這些圖像,并渲染一個(gè)完成的3D場景。除了圖像,該系統(tǒng)還需要關(guān)于攝像機(jī)位置的數(shù)據(jù)。

幾年來,研究人員一直在改進(jìn)這種2D到3D模型,在完成的渲染中添加更多的細(xì)節(jié),并提高渲染速度。英偉達(dá)表示,其新的即時(shí)NeRF模型是目前開發(fā)的最快模型之一,它將渲染時(shí)間從幾分鐘縮短到“幾乎立即”完成。

英偉達(dá)在一篇描述這項(xiàng)工作的博客文章中說,隨著這項(xiàng)技術(shù)變得更快、更容易實(shí)現(xiàn),它可以用于各種任務(wù)。

英偉達(dá)的Isha Salian寫道:“即時(shí)NeRF可以用于創(chuàng)建虛擬世界的化身或場景,以3D方式捕捉視頻會(huì)議參與者及其環(huán)境,或者為3D數(shù)字地圖重建場景。”這項(xiàng)技術(shù)可以用來訓(xùn)練機(jī)器人和自動(dòng)駕駛汽車,通過捕捉現(xiàn)實(shí)世界物體的2D圖像或視頻片段來理解它們的大小和形狀。它還可以用于建筑和娛樂,以快速生成真實(shí)環(huán)境的數(shù)字表示,創(chuàng)作者可以在此基礎(chǔ)上進(jìn)行修改和構(gòu)建。聽起來像跟熱門的元宇宙也關(guān)系密切。

在一篇描述這項(xiàng)工作的論文中,英偉達(dá)的研究人員表示,他們能夠“在幾十毫秒內(nèi)”輸出1920×1080分辨率的場景。研究人員還分享了項(xiàng)目的源代碼,允許其他開發(fā)人員利用以實(shí)現(xiàn)他們的應(yīng)用需求??雌饋鞱eRF渲染的進(jìn)展很快,并且可能在未來的幾年里開始對(duì)現(xiàn)實(shí)世界產(chǎn)生影響。

2345截圖20211028093243.png

THEEND

最新評(píng)論(評(píng)論僅代表用戶觀點(diǎn))

更多
暫無評(píng)論