元國際實在狠人物!英偉達密集亮劍,敞開造虛擬人秘籍 |
發(fā)布時間:2022-08-11 文章來源:本站 瀏覽次數(shù):2350 |
1993年,是英偉達誕生之年,是Web大規(guī)劃普及的一年,也是電影《侏羅紀(jì)公園》問世的一年,預(yù)示著3D核算機圖形年代的到來。 智東西8月10日報道,在今天舉辦的核算機圖形學(xué)年會SIGGRAPH上,英偉達Omniverse和仿真技能副總裁Rev Lebaredian談到自1993年以來,2022年將是核算機圖形職業(yè)大的轉(zhuǎn)折點,今年的SIGGRAPH“可能將載入史冊”。 在SIGGRAPH的主題演講期間,英偉達宣告了一系列由AI驅(qū)動的元國際新東西,包含實時協(xié)作與仿真渠道Omniverse的新版本、能幫助開發(fā)者更快構(gòu)建高質(zhì)量虛擬人的Avatar云引擎,并發(fā)布一項將“元國際言語”USD運用于工業(yè)元國際的多年開展路線圖。 今天,英偉達已經(jīng)是專注于3D核算機圖形學(xué)的重要的公司之一。 英偉達創(chuàng)始人兼CEO黃仁勛說:“人工智能和核算機圖形學(xué)的結(jié)合將為元國際供給動力,即互聯(lián)網(wǎng)的下一次演化!盧ev Lebaredian亦談道:“咱們看到的是互聯(lián)網(wǎng)新年代的開端,一個被廣泛稱作「元國際」的年代! 迄今為止,咱們看到的元國際概念仍然龐雜,整個生態(tài)還處于混沌階段。不過時間短的紊亂并不會影響長遠的走向,整個信息技能產(chǎn)業(yè)都在走向虛實結(jié)合,并將影響力輻射至各行各業(yè)。因而英偉達所拿手的圖形烘托、人工智能(AI)核算等才能,未來將繼續(xù)有很大的增長空間。 在此前多數(shù)公共場所中,英偉達并不常常議論“元國際”這個概念,但從它近年的布局能夠看到,在構(gòu)建元國際所需的軟硬件根底設(shè)施布局上,英偉達已經(jīng)走得相當(dāng)之遠。 一、助攻構(gòu)建虛擬人!推Avatar云引擎,大降開發(fā)門檻 虛擬形象的鴻溝正在敏捷擴展,從游戲界開展向娛樂、銀行、交通和酒店等更多職業(yè)。如今,游戲中的虛擬形象愈發(fā)傳神生動,虛擬人唱歌跳舞、帶貨直播、客戶服務(wù)也不是什么鮮見的事。 但要打造滿足傳神的、神態(tài)天然、能與人類流通互動的虛擬人,對技能有較高的要求。 而英偉達正在做的事,就是設(shè)法降低虛擬人、虛擬化身、3D虛擬頭像的開發(fā)門檻。 為此,英偉達今天發(fā)布了一個用于高效創(chuàng)立和布置3D虛擬形象的云原生AI模型和服務(wù)——Omniverse Avatar Cloud Engine(ACE)。 ACE建立在英偉達的統(tǒng)一核算結(jié)構(gòu)根底之上,內(nèi)置有許多雜亂的AI技能,為用戶供給豐富的軟件東西和API。 它基本覆蓋了虛擬人所需的各種核心功用,如完成了解多種言語、響應(yīng)語音提示、智能視頻剖析、高性能引薦系統(tǒng)、與環(huán)境互動并供給智能建議等等。這些東西使開發(fā)者足以解鎖交互式虛擬人所需的大部分技能,并做到先進水平。 比方ACE內(nèi)置的AI東西Audio2Face,能夠用音頻文件直接創(chuàng)立面部動畫,并供給有推理和生成傳神情緒的新功用;Audio2Gesture能用能用音頻文件生成傳神的身體姿勢動作;Project Tokkio則能供給視覺、感知和智能對話才能,讓虛擬形象供給建議、進步餐廳等場所的客戶服務(wù)水平。 憑借此類東西,虛擬人能夠具有像實在人類一樣雜亂的面部信息、流通天然的表情和動作,以及與說話內(nèi)容符合的口型。 ACE的模型和服務(wù)都在云端,因而企業(yè)不用擔(dān)心算力問題,任何規(guī)劃的企業(yè)都能夠當(dāng)即獲得構(gòu)建布置虛擬形象所需的大規(guī)劃算力。 這對游戲、聊天機器人、虛擬人、數(shù)字孿生和虛擬國際的大規(guī)劃生產(chǎn)作業(yè)都會很有幫助。 二、元國際東西包再升級,Omniverse新版本發(fā)布 在元國際熱潮爆發(fā)前,英偉達的Omniverse渠道就在繼續(xù)打磨和預(yù)熱。如今該渠道在構(gòu)建虛擬國際方面的價值日益凸顯,這也成為黃仁勛頗具遠見性的又一例子。在本屆SIGGRAPH上,黃仁勛發(fā)布了Omniverse的新版本。 Omniverse是一個用于構(gòu)建虛擬國際的多GPU可擴展核算渠道,已被全球約700家搶先的公司用于改進修建和產(chǎn)品規(guī)劃、簡化視覺效果作業(yè)流程以及構(gòu)建工廠、城市和地球的數(shù)字孿生。黃仁勛將其描述為“一個USD渠道,一個構(gòu)建元國際運用的東西包,一個運行虛擬國際的核算引擎”。 此次針對Omniverse的擴展包含多項AI東西和功用,它們讓藝術(shù)家、開發(fā)者和工程師能夠比以往愈加輕松地構(gòu)建虛擬國際和內(nèi)容,而且愈加無縫地銜接當(dāng)今搶先的3D運用。 其中,Omniverse Kit是用于構(gòu)建本地Omniverse擴展和運用程序的東西包,里面用于優(yōu)化物理仿真的PhysX和進步3D作業(yè)流程協(xié)作功率的OmniLive Workflows均得到更新;Omniverse Machinima則用于輕松構(gòu)建3D電影和動畫電影,里面有來自數(shù)百個游戲的全新免費3D財物。 咱們運用谷歌、百度等查找引擎查資料已經(jīng)是家常便飯,英偉達同樣打造了一款專門用來查找3D視覺數(shù)據(jù)的查找引擎DeepSearch。 DeepSearch運用AI技能,準(zhǔn)確地在龐大的、未標(biāo)記的3D視覺財物數(shù)據(jù)庫中進行查找。運用者用天然言語文本就能在DeepSearch上進行查找。目前該查找引擎已面向Omniverse Enterprise客戶敞開。 物理機器學(xué)習(xí)結(jié)構(gòu)NVIDIA Modulus現(xiàn)在也能夠用作Omniverse擴展程序。之前科學(xué)家和工程師用這個結(jié)構(gòu)創(chuàng)立數(shù)字孿生。 經(jīng)Modulus練習(xí)的物理機器學(xué)習(xí)模型能供給近實時的性能,依據(jù)不同的運用,其速度可進步4000甚至100000倍,而且具有前所未有、更挨近高保真模仿的準(zhǔn)確性。 此外,英偉達與工業(yè)、規(guī)劃、模仿和CAD軟件生態(tài)系統(tǒng)中的合作伙伴一同發(fā)布了11個新的Omniverse銜接器(Connector),這些根據(jù)USD的插件進一步向工業(yè)界和科學(xué)界的公司敞開Omniverse作業(yè)流程。Omniverse USD生態(tài)系統(tǒng)中的銜接器總數(shù)現(xiàn)已達到112個。這些銜接器將進一步解鎖元國際作業(yè)流程。 英偉達還發(fā)布了多項核心仿真模仿技能的嚴(yán)重更新。這些技能在元國際國際中用于表示原料、物理和光線。NVIDIA MDL原料規(guī)范一向支撐物理級準(zhǔn)確的3D原料表現(xiàn),現(xiàn)已徹底開源,使開發(fā)者能夠為任何烘托器帶來原料定義言語支撐。 其他新發(fā)布還有下一代OpenVDB(存儲體積數(shù)據(jù)開源庫)NeuralVDB,它能為稀少體積數(shù)據(jù)集帶來了AI和GPU優(yōu)化,并將這些海量數(shù)據(jù)集的內(nèi)存占用率降低了多達100倍。 通用場景描述(USD)一種3D國際的開源和可擴展言語,是在動畫和視覺效果作業(yè)流程中完成3D數(shù)據(jù)交換規(guī)范化的一種方法。 USD在視覺特效和動畫、工業(yè)、規(guī)劃和科學(xué)運用等方面都呈現(xiàn)出快速增長的勢頭。媒體、游戲、機器人、工業(yè)自動化、零售和百貨職業(yè)的立異者已經(jīng)開端將USD作為他們首選的元國際言語。 今天,英偉達宣告了一項開展USD的大型方案,預(yù)備將USD開展成為敞開元國際和3D互聯(lián)網(wǎng)的根底。其方案包含讓一切國家和言語的用戶都能參加USD的國際字符支撐、完成城市規(guī)劃和行星規(guī)劃數(shù)字孿生的地理空間坐標(biāo)支撐,以及完成數(shù)字孿生與物理國際同步開展的物聯(lián)網(wǎng)數(shù)據(jù)實時流式傳輸。 英偉達將與USD的發(fā)明者皮克斯以及Adobe、Autodesk、西門子等多家職業(yè)內(nèi)搶先的企業(yè)合作,實施一項多年開展路線圖,將USD的功用擴展到視覺效果運用之外,使其能夠更好地支撐修建、工程、制造業(yè)、科學(xué)核算、機器人、工業(yè)數(shù)字孿生等領(lǐng)域的工業(yè)元國際運用,助力3D藝術(shù)家、規(guī)劃師、開發(fā)者等人員,在構(gòu)建虛擬國際時能夠在不同的作業(yè)流程和運用中進行協(xié)作。 “USD是皮克斯動畫制造流程的基石。”皮克斯動畫作業(yè)室首席技能官Steve May認(rèn)為,“英偉達將幫助USD開展成為徹底可互操作3D渠道的敞開根底,謀福一切職業(yè)! 工業(yè)巨頭西門子就在跟英偉達合作完成未來的規(guī)劃、工程和協(xié)作空間——工業(yè)元國際。西門子數(shù)字工業(yè)首席技能官Dirk Didascalou說:“咱們十分高興能在西門子Xcelerator渠道上支撐USD,并方案與英偉達合作開發(fā)下一代USD格式! 沃爾沃汽車高級可視化專家Mattias Wikenmalm 亦認(rèn)可USD的巨大開展前景:“沃爾沃在第一時間了解到敞開、可擴展、可互操作的3D場景描述對咱們元國際項目的價值。經(jīng)過堅持統(tǒng)一的財物來源并完成它們在不同虛擬國際之間的交換,沃爾沃將打造出實在無縫的3D互聯(lián)網(wǎng)顧客運用。 為了加快USD的開發(fā)和選用,英偉達宣告開發(fā)一個敞開的USD兼容性測驗和認(rèn)證套件,開發(fā)者能夠自在運用該套件來測驗他們運用USD構(gòu)建的項目并驗證結(jié)果是否符合預(yù)期。 此外,英偉達正在發(fā)布一系列免費資源來加快USD的選用范圍,其中包含數(shù)千種專門用于幫助不具有3D專業(yè)知識的用戶構(gòu)建敞開虛擬國際的USD財物。英偉達還供給數(shù)百個可按需選擇的教程、文檔和開發(fā)者東西來幫助普及USD教育。 NVIDIA還宣告投資構(gòu)建能夠?qū)⑹⑿械?D軟件生態(tài)系統(tǒng)銜接到NVIDIA Omniverse的USD插件。 NVIDIA還在SIGGRAPH上匯集了USD生態(tài)系統(tǒng)中的數(shù)百名工程和產(chǎn)品負(fù)責(zé)人,并組成作業(yè)委員會,幫助NVIDIA調(diào)整USD開發(fā)的優(yōu)先事項并獲取關(guān)于重點開發(fā)方向的反應(yīng)。 目前,Adobe、Autodesk、皮克斯和西門子等很多公司都在為USD的開展供給幫助和支撐。 四、推神經(jīng)圖形東西包,簡化虛擬國際構(gòu)建進程 為了進一步簡化虛擬國際建模進程,進步建模速度,英偉達發(fā)布了多個運用AI和神經(jīng)圖形規(guī)范研究的軟件開發(fā)東西包。 神經(jīng)圖形用于模仿和烘托一個動態(tài)的虛擬國際。英偉達人工智能研究副總裁Sanja Fidler說:“神經(jīng)圖形將人工智能和圖形交錯在一起,為未來合適從數(shù)據(jù)中學(xué)習(xí)的圖形流水線鋪平了路途! 構(gòu)建虛擬國際,3D內(nèi)容創(chuàng)作是關(guān)鍵部分。而神經(jīng)圖形旨在引導(dǎo)內(nèi)容發(fā)明者為元國際國際發(fā)明“風(fēng)趣的內(nèi)容”,不僅是藝術(shù)家,社交媒體用戶也能夠憑借它來輕松地?fù)?jù)相片創(chuàng)立3D內(nèi)容。 一個運用例子是將掃描的2D圖像帶入虛擬現(xiàn)實。Fidler談道,以前要做件事,藝術(shù)家必須運用不同的東西,很費時,而英偉達的“神經(jīng)重建”進程將其變成了一個統(tǒng)一結(jié)構(gòu)。 憑借英偉達研制的軟件Instant NeRF,藝術(shù)家能夠用攝像頭掃描并運用神經(jīng)圖形進行快速捕捉,從2D圖像創(chuàng)立物體或場景的3D模型,并能夠當(dāng)即將其導(dǎo)入虛擬國際。 英偉達新發(fā)布的Kaolin Wisp,是深度學(xué)習(xí)東西庫Kaolin的彌補,能讓工程師幾天內(nèi)就實施新的練習(xí)模式;還有用AI大幅減少3D模型數(shù)據(jù)內(nèi)存占用的NeuralVDB,這是對體積數(shù)據(jù)存儲OpenVDB職業(yè)規(guī)范的改進。 結(jié)語:英偉達的元國際大志 從今年英偉達在SIGGRAPH上的主題演講,咱們能夠看到英偉達已經(jīng)將支撐元國際所需的技能及產(chǎn)品,視作拉動未來增長的重要引擎。 元國際也被稱作“3D版互聯(lián)網(wǎng)”,而假如要讓它像現(xiàn)在大多數(shù)上網(wǎng)用戶都十分習(xí)氣的互聯(lián)網(wǎng),那么它必須具有讓普通用戶也能輕松獲取、構(gòu)建3D內(nèi)容的根底條件。 現(xiàn)在,英偉達顯然正試圖接過這一重?fù)?dān)。 英偉達供給的Omniverse渠道以及一系列元國際構(gòu)建相關(guān)東西,都在為開發(fā)者供給打通物理國際和虛擬國際之間的快捷東西,即讓虛擬人、虛擬物體、虛擬國際的創(chuàng)立都更快捷,同時愈加趨近于實在的國際。 這些軟件東西越是好用,就越是會吸引更多開發(fā)者進入英偉達的生態(tài)、采購英偉達的硬件產(chǎn)品,從而推進英偉達的業(yè)績走向新的高度。 在圖形處理年代和人工智能年代,英偉達都是底層硬件根底設(shè)施的核心供應(yīng)商,跟著人們預(yù)備邁向元國際年代,英偉達同樣大志勃勃,目的占據(jù)硬件中心之位。 正如NVIDIA Omniverse和仿真模仿技能副總裁Rev Lebaredian所言:“元國際蘊含的商機價值數(shù)萬億美元,任何企業(yè)組織都不肯錯失它! |
|