NVIDIA võimaldab arendajatel luua keerukaid simulatsioone kasutades Frontier AI agente ja Omniverse'i teeke

Pilt: Illustrative image · Amusements.global · CC BY-SA 4.0 · Allikas

NVIDIA demonstreerib, kuidas arendajad kombineerivad frontier tehisintellekti mudeleid nagu GPT-6 Astra Omniverse'i teekidega, et luua keerukaid simulatsioone, toetades robootikat, isesõitvaid sõidukeid, digitaalseid kaksikuid ja palju muud loomuliku-keele AI juhendamise abil.

NVIDIA toob esile uuenduslikud viisid frontier tehisintellekti mudelite integreerimiseks oma Omniverse'i teekidega simulatsioonide arenduse muutmiseks. Arendajad juhivad AI agente, näiteks GPT-6 Astra, loomuliku keele käsklustega, et kokku panna ressursse, siduda füüsikamootoreid, renderdamise mooduleid ja sensorite simulatsioone, saavutades täielikult funktsionaalsed simulatsioonirakendused. See lähenemine lihtsustab keskkondade loomist robootika, isesõidu, digitaalsete kaksikute valideerimise ja kosmose modelleerimise testimiseks.

Olulised demonstratsiooniprojektid näitavad selle tehnoloogia ulatust. Laoseadmete automatiseerimiseks valmistudes loodi Astra abil humanoidroboti simulatsioon esimese- ja kolmandast isikust vaadetega, mis koordineeris füüsikat (kasutades ovphysx), renderdamist (ovrtx), stseenihaldust (ovstage) ja kasutajaliideseid (ovui). Isesõidu sõidukite simulatsiooni töövood keskkonnas nagu San Francisco Market Street loodi sensori- ja sõidumudelite testimiseks läbi järk-järgult ressursside integreerimise ja keskkonnamuutlikkuse testimise.

Digitaalsete kaksikute täiustamiseks võrdlesid AI agendid simuleeritud sensoriväljundeid salvestatud reaalse maailma kaamera- ja lidar-andmetega, parandasid järk-järgult stseeni täpsust, muutes OpenUSD ressursse ja kontrollides tulemusi peamiste jõudlusnäitajate abil. Robootikauuringutes kasutati simulatsioone keerukate liigutuste ja lahtivõtmistööde testimiseks, ühendades CAD mudelid, füüsikamootorid ja AI genereeritud tööriistade kujundused.

Märkiv näide hõlmab rahvusvahelise kosmosejaama OpenUSD mudeli kokku panemist, mis on integreeritud reaalajas telemeetriareaga, renderdatud ja voogedastatud brauseripõhiste rakenduste kaudu, mis on täielikult AI käsklustega arendatud. Sarnaselt teisendati stereo-kaamerate võtted redigeeritavateks OpenUSD stuudioteks interaktsioonide testimiseks, võimaldades detailselt analüüsida füüsikalist käitumist.

Selle ökosüsteemi aluseks on ovstage, kõrgtulemuslik C ja Python teek, mis pakub ühiskasutatavat GPU kiirendusega runtime-stseenide andmesuba, mis ühildub Omniverse'i teekidega. Ovstage võimaldab efektiivselt manipuleerida ja jagada USD stseenandmeid mitme simulatsioonikomponendi vahel ilma tarbetu parsimiseta või mälukulu tõusuta.

NVIDIA lähenemine pakub võimsat töövoogu, kus arendajad juhivad AI agente täielike simulatsioonirakenduste loomiseks, täiendamiseks ja valideerimiseks, kasutades tipptasemel füüsika-, renderdamis- ja sensorite simulatsioonivõimeid sujuva integreerimisega. See frontier AI kodeerimismudelite ja Omniverse'i teekide liitumine tähistab olulist sammu simulatsiooni efektiivsuses ja keerukuses, toetades robootika, isesõitvate sõidukite, digitaalsete kaksikute ja muu uurimist ning arendust.