[汽車之家 行業(yè)] 英偉達(Nvidia)公司宣布其在人工智能(AI)研究中取得突破,,研究人員已經(jīng)通過訓練神經(jīng)網(wǎng)絡在真實的視頻片段上來教人工智能系統(tǒng)如何生成和細節(jié)新的虛擬城市景觀。該技術可為游戲,、汽車,、建筑、機器人或虛擬現(xiàn)實等快速創(chuàng)建虛擬世界,。
在新的工作中,,團隊使用在DGX-1上的Nvidia Tesla V100GPU上運行的PyTorch深度學習框架,并在數(shù)千個Cityscapes視頻和Apolloscapes數(shù)據(jù)集上培訓它們,。然后,,研究人員將使用虛幻引擎4構建虛擬城市的基礎,并強調建筑物,、樹木和汽車等事物的總體輪廓和布局,。基于所學到的一切,,神經(jīng)網(wǎng)絡填充空格,,包括精細的細節(jié)、顏色,、光照和紋理,。
不同于需要用特定指令編程的傳統(tǒng)算法,神經(jīng)網(wǎng)絡更像有機大腦,,隨著時間推移,,從“經(jīng)驗”中學習。這種體驗可以作為大型數(shù)據(jù)集饋送給系統(tǒng),,然后系統(tǒng)可以使用學到的規(guī)則來生成自己的內容,。最近幾年,它被用于將不同的藝術風格應用到視頻中,,基于對接下來會發(fā)生什么的預測從靜止照片中創(chuàng)建短視頻,,以及生成額外的幀間幀以使得任何剪輯以慢動作發(fā)生,。
英偉達研究人員利用神經(jīng)網(wǎng)絡,,實時創(chuàng)建合成3D環(huán)境。與現(xiàn)在需要為虛擬世界中每個對象單獨建模的方法相比,,英偉達的方案更便宜,、所需時間更短。
此次研究產(chǎn)生了一個簡單的駕駛游戲,,允許參與者在城市場景中進行導航,,場景中的所有內容都使用神經(jīng)網(wǎng)絡,以交互式方式呈現(xiàn),神經(jīng)網(wǎng)絡將傳統(tǒng)圖形引擎生成的3D世界的草圖轉換成視頻,。該神經(jīng)網(wǎng)絡已經(jīng)學會模擬真實世界的狀況,,包括照明、材料和動態(tài)表現(xiàn),。
由于虛擬場景完全由人工合成而生成,,因此可以輕松編輯、刪除或是添加對象,。研究人員表示,,英偉達的Tensor Core圖形處理器(GPU)使該演示成為可能。神經(jīng)網(wǎng)絡的工作原理是首先對場景進行高級描述,,例如描述對象所處位置及其一般特征,,如圖像的特定部分是否包括汽車或建筑物,或者物體邊緣的位置,,然后神經(jīng)網(wǎng)絡會根據(jù)其在真實世界視頻中學到的知識豐富詳細信息,。(消息來源:NEW ATLAS;編譯/汽車之家 李娜)
好評理由:
差評理由: