Code Velocity
Utviklerverktøy

Omniverse-biblioteker: Fysisk AI-integrasjon for eksisterende apper

·7 min lesing·NVIDIA·Opprinnelig kilde
Del
NVIDIA Omniverse's modulære biblioteker integrerer fysiske AI-funksjoner i eksisterende applikasjoner for sanntids simulering av digitale tvillinger.

title: "Omniverse-biblioteker: Fysisk AI-integrasjon for eksisterende apper" slug: "integrate-physical-ai-capabilities-into-existing-apps-with-nvidia-omniverse-libraries" date: "2026-04-11" lang: "no" source: "https://developer.nvidia.com/blog/integrate-physical-ai-capabilities-into-existing-apps-with-nvidia-omniverse-libraries/" category: "Utviklerverktøy" keywords:

  • NVIDIA Omniverse
  • Fysisk AI
  • Digitale tvillinger
  • Robotikksimulering
  • Modulær arkitektur
  • ovrtx
  • ovphysx
  • ovstorage
  • C APIer
  • Python-bindinger
  • Agentisk orkestrering
  • Isaac Lab meta_description: "NVIDIA Omniverse-bibliotekene tilbyr en modulær arkitektur for å integrere fysisk AI-funksjonalitet i eksisterende applikasjoner. Bruk ovrtx, ovphysx og ovstorage for høykvalitetssimulering, fysikk i sanntid og enhetlige datapipeliner, noe som muliggjør opprettelse av digitale tvillinger og agentisk orkestrering." image: "/images/articles/integrate-physical-ai-capabilities-into-existing-apps-with-nvidia-omniverse-libraries.png" image_alt: "NVIDIA Omniverse's modulære biblioteker integrerer fysiske AI-funksjoner i eksisterende applikasjoner for sanntids simulering av digitale tvillinger." quality_score: 94 content_score: 93 seo_score: 95 companies:
  • NVIDIA schema_type: "NewsArticle" reading_time: 7 faq:
  • question: "Hva er NVIDIA Omniverse-bibliotekene, og hvilket problem løser de for utviklere?" answer: "NVIDIA Omniverse-bibliotekene representerer en ny, modulær arkitektur som eksponerer kjernekomponenter i Omniverse, som RTX-rendring (ovrtx), PhysX-basert simulering (ovphysx) og datalagringspipeliner (ovstorage), som frittstående C APIer med C++ og Python-bindinger. Denne tilnærmingen gjør at utviklere kan integrere spesifikke, høykvalitets fysiske AI-funksjoner direkte i sine eksisterende industrielle og robotikkprogramvarestabler uten å måtte ta i bruk hele Omniverse-plattformen. Dette løser utfordringen med monolittiske kjøretider, muliggjør bedre skalerbarhet, hodeløs distribusjon og sømløs integrasjon med eksisterende CI/CD-systemer og applikasjonsrammeverk, noe som betydelig reduserer behovet for omfattende arkitektoniske omskrivninger."
  • question: "Hvordan forbedrer 'ovrtx', 'ovphysx' og 'ovstorage' eksisterende applikasjoner med fysiske AI-funksjoner?" answer: "Trioen 'ovrtx', 'ovphysx' og 'ovstorage' tilbyr distinkte, men komplementære funksjoner for fysisk AI-integrasjon. 'ovrtx' gir høykvalitets, sanntids strålesporet rendring og sensorsimulering, avgjørende for multimodal robotikkpersepsjon og syntetisk datagenerering. 'ovphysx' leverer høyhastighets, USD-native fysikksimulering, essensielt for robotikktrening og sanntids kontrollsløyfer. 'ovstorage' etablerer enhetlige fysiske AI-datapipeliner, som muliggjør sømløs tilkobling av eksisterende PLM/PDM-infrastruktur til Omniverse, noe som forenkler storskala distribuert databehandling og unngår kostbare manuelle datamigrasjoner. Sammen muliggjør disse bibliotekene granulær, ytelsessterk integrasjon av avansert simulering og databehandling."
  • question: "Hva er Model Context Protocol (MCP), og hvordan legger det til rette for agentisk orkestrering innenfor Omniverse?" answer: "Model Context Protocol (MCP) er en avgjørende mekanisme innenfor Omniverse som gjør at LLM-baserte agenter kan interagere med og orkestrere fysiske AI-simuleringer. MCP-servere beskriver operasjoner (f.eks. lasting av USD-scener, redigering av prims, steging gjennom simulering) i et maskinlesbart skjema. Dette gjør at intelligente agenter, drevet av store språkmodeller, kan bla gjennom tilgjengelige APIer, generere scenekode og manipulere simuleringselementer basert på høynivåbeskrivelser. Ved å håndtere fjernprosedyrekallene (RPCene) til Omniverse, gjør MCP det mulig for utviklere å fokusere på å definere sofistikerte agentatferder og sikkerhetsmekanismer, noe som betydelig skalerer og automatiserer komplekse simuleringsarbeidsflyter for fysisk AI."
  • question: "Hvordan har NVIDIA Isaac Lab dratt nytte av overgangen til en modulær, bibliotekbasert arkitektur?" answer: "NVIDIA Isaac Lab, et høyytelses simuleringsrammeverk for robotikk for forsterkningslæring, har hatt stor nytte av overgangen til en modulær arkitektur drevet av ovphysx og ovrtx i sin 3.0 Beta-utgave. Dette skiftet muliggjør eksplisitt utførelseskontroll, deterministisk simulering og muligheten til å kjøre høydensitets, hodeløs fysikk uten avhengighet av brukergrensesnitt. Utviklere har nå fleksibiliteten til å velge mellom 'ovphysx' eller en Kit-løs Newton-backend basert på simuleringsbehovene sine, og kan utnytte et pluggbart rendereringssystem som støtter OVRTX, Isaac RTX og andre visualisatorer. Denne modulariteten sikrer at Isaac Lab oppfyller de ekstreme skalerbarhets- og deterministiske kontrollkravene for avansert robotikktrening."
  • question: "Hvilke store industriselskaper tester for tiden NVIDIA Omniverse-bibliotekene, og til hvilke formål?" answer: "Ledende industriselskaper som ABB Robotics, PTC, Siemens og Synopsys tester for tiden NVIDIA Omniverse-bibliotekene. Disse selskapene utnytter den modulære arkitekturen til å integrere høykvalitetssimulering, skape avanserte digitale tvillinger og muliggjøre skalerbare fysiske AI-funksjoner direkte i sine eksisterende design-, ingeniør- og produksjonsarbeidsflyter. Dette gjør at de kan validere robotdesign, optimalisere industrielle systemer og forbedre produktlivssyklusstyring (PLM/PDM) og kontinuerlig integrasjon/kontinuerlig distribusjon (CI/CD)-systemer, alt før fysiske prototyper i det hele tatt bygges, noe som signaliserer et betydelig skifte mot AI-drevet industriell transformasjon."
  • question: "Hva er de umiddelbare fordelene ved å bruke Omniverse-bibliotekene sammenlignet med den komplette Omniverse-containerstakken for eksisterende applikasjoner?" answer: "De umiddelbare fordelene ved å bruke Omniverse-biblioteker fremfor den komplette containerstakken for eksisterende applikasjoner inkluderer betydelig redusert arkitektonisk friksjon og raskere integrasjon. Utviklere kan selektivt integrere spesifikke Omniverse-funksjoner – som avansert rendring eller fysikksimulering – i sin nåværende programvare uten å måtte foreta store revisjoner. Denne tilnærmingen muliggjør hodeløs distribusjon, bedre skalerbarhet av simuleringer og direkte tensorisert datautveksling. Den adresserer tidligere flaskehalser som rammeverkslåsning, UI-avhengigheter og arkitektonisk stivhet, og tilbyr en strømlinjeformet vei til å utnytte NVIDIAs kraftige fysiske AI-teknologier innenfor etablerte industrielle og robotikkøkosystemer."

NVIDIA Omniverse-bibliotekene avduket: Muliggjør fysisk AI-integrasjon

På GTC 2026 annonserte NVIDIA en betydelig utvikling for sin Omniverse-plattform, og introduserte en modulær, bibliotekbasert arkitektur designet for sømløst å integrere avanserte fysiske AI-funksjoner i eksisterende applikasjoner. Dette paradigmeskiftet adresserer et kritisk behov innen industriell og robotikkutvikling, der monolittiske kjøretider ofte hindrer skalerbarhet, hodeløs distribusjon og integrasjon med etablerte CI/CD-systemer. Ved å eksponere kjernekomponenter i Omniverse – RTX-rendring, PhysX-basert simulering og datalagringspipeliner – som frittstående C APIer med C++ og Python-bindinger, gjør NVIDIA det mulig for utviklere å innebygge kraftig sanntids digital tvilling og fysisk AI-funksjonalitet uten å kreve en fullstendig arkitektonisk overhaling. Denne modulariteten demokratiserer tilgangen til høykvalitetssimulering, og gjør fysisk AI til en oppnåelig virkelighet for et bredere spekter av bedrifter.

Fysisk AI, definert som AI-systemer som oppfatter, resonnerer og handler innenfor fysisk forankrede simulerte miljøer, transformerer raskt hvordan industrier designer og validerer komplekse systemer. Fra robotarmbevegelser til hele fabrikkoppsett reduserer trening og validering av AI-policyer i et digitalt tvillingmiljø kostnader drastisk og akselererer utviklingssyklusene. De nye Omniverse-bibliotekene, inkludert 'ovrtx', 'ovphysx' og 'ovstorage', er satt til å være hjørnesteinen i denne transformasjonen, slik at bedrifter kan tilføre sin proprietære programvare NVIDIAs banebrytende simuleringsteknologi.

Modulær arkitektur for sømløs fysisk AI-integrasjon

Introduksjonen av en bibliotek-først-arkitektur endrer fundamentalt hvordan utviklere interagerer med NVIDIA Omniverse-økosystemet. I stedet for å ta i bruk et omfattende applikasjonsrammeverk, kan team nå selektivt kalle Omniverse-rendring, fysikk og lagrings-APIer direkte fra sine egne prosesser og tjenester. Denne tilnærmingen eliminerer utfordringene knyttet til rammeverkslåsning, UI-avhengigheter og arkitektonisk stivhet som ofte følger med storskala programvareadopsjoner.

Dette modulære designet er spesielt gunstig for utviklere med etablerte programvarestabler, slik at de kan utnytte Omniverse's kraftige funksjoner uten forstyrrende arkitektoniske omskrivninger. Bibliotekene er konstruert for hodeløs distribusjon, noe som sikrer optimal ytelse og skalerbarhet for krevende industrielle og robotikkapplikasjoner. Dette strategiske trekket fra NVIDIA understreker en forpliktelse til fleksibilitet og utviklersentrerte løsninger, og posisjonerer Omniverse som et tilpasningsdyktig verktøysett for fremtiden innen AI.

Kjernebibliotekene i Omniverse: ovrtx, ovphysx og ovstorage

De nylig annonserte bibliotekene tilbyr distinkte, men sammenkoblede funksjoner, hver designet for å løse spesifikke integrasjonsutfordringer i industriell programvareutvikling. De utnytter eksisterende Omniverse-komponenter som OpenUSD for scenebeskrivelse og SimReady-aktiva for simuleringsmiljøer av høy kvalitet, noe som sikrer en sammenhengende og kraftig utviklingsopplevelse.

BibliotekNøkkelfunksjonerIngeniørmessig innvirkning
ovrtxHøykvalitets, høyytelses sanntids strålesporing og sensorsimuleringIntegrerer banebrytende RTX-rendring direkte i eksisterende applikasjoner, noe som muliggjør multimodal robotikkpersepsjon, avansert syntetisk datagenerering og svært realistisk visuell tilbakemelding for digitale tvillinger og simulerte miljøer.
ovphysxHøyhastighets, USD-native fysikksimuleringLegger til lettvekts, maskinvareakselerert fysikksimulering til applikasjoner, noe som forenkler høyhastighets datautveksling for robotikktrening, sanntids kontrollsløyfeintegrasjon og nøyaktige fysiske interaksjoner i komplekse industrielle scenarier.
ovstorageEnhetlige fysiske AI-datapipelinerKobler eksisterende lagrings- og PLM/PDM-infrastruktur direkte til Omniverse-økosystemet via et API-drevet bibliotek. Dette muliggjør storskala distribuert databehandling og høy ytelse, og unngår på en avgjørende måte kostbare og tidkrevende manuelle datamigrasjoner for distribusjoner på bedriftsnivå.

Disse bibliotekene er for øyeblikket i tidlig tilgang på GitHub og NGC, der NVIDIA aktivt samler tilbakemeldinger og planlegger en produksjonsutgivelse med API-stabilitet senere i år. Intern testing i høyytelsesstabler som NVIDIA Isaac Lab og Omniverse DSX Blueprint sikrer at de oppfyller strenge bedriftskrav før generell tilgjengelighet.

Agentisk orkestrering med Model Context Protocol (MCP)

For ytterligere å forbedre nytten av disse bibliotekene, spesielt innen det voksende feltet AI-agenter, introduserer Omniverse funksjoner for agentisk orkestrering via Model Context Protocol (MCP)-servere. Disse serverne er designet for å gjøre simuleringer brukbare fra LLM-baserte agenter ved å beskrive operasjoner – som lasting av USD-scener, redigering av prims eller steging gjennom simuleringer – i et maskinlesbart skjema. Dette gjør at AI-verktøy, som avanserte LLM-er, trygt og effektivt kan kalle Omniverse-funksjonalitet.

Kit USD-agentene er for eksempel en samling av MCP-servere for Kit, USD og OmniUI, som gjør det mulig for agenter å bla gjennom APIer, generere scenekode og manipulere UI-elementer eller laghierarkier basert på høynivå tekstbeskrivelser. Dette gjør det mulig for utviklere å definere sofistikerte agentatferder og sikkerhetsmekanismer, noe som avlaster kompleksiteten ved å manuelt koble hver simulerings-API-kall. For å skalere disse avanserte arbeidsflytene kan utviklere dra nytte av NemoClaw, en infrastrukturstakk for OpenClaw-fellesskapet som distribuerer sikre, autonome agenter innenfor isolerte, policybeskyttede sandkasser. Denne utviklingen baner vei for stadig mer autonome og intelligente simuleringsmiljøer, og akselererer utviklingen av komplekse fysiske AI-systemer og støtter kraftig evaluering av AI-agenter for produksjon: En praktisk guide til Strands Evals.

Rask start med Docker for MCP-servere forenkler distribusjon, noe som gjør at utviklere kan utnytte NVIDIAs skybaserte embedder- og reranker-tjenester uten lokale GPUer, og kun krever en NVIDIA API-nøkkel.

Casestudie: Optimalisering av NVIDIA Isaac Lab med modulære biblioteker

De praktiske fordelene ved denne modulære tilnærmingen demonstreres tydelig av den pågående ingeniørutviklingen av NVIDIA Isaac Lab. Som et høyytelses simuleringsrammeverk for robotikk som er kritisk for forsterkningslæring (RL), krever Isaac Lab ekstrem skalerbarhet og deterministisk kontroll.

Med Isaac Lab 3.0 Beta har NVIDIA med hell overført sitt grunnleggende lag fra det tradisjonelle monolittiske Kit-rammeverket til en multi-backend modulær arkitektur. Dette gjør at utviklere kan velge mellom 'ovphysx' – et frittstående bibliotek som pakker inn PhysX SDK – eller en Kit-løs Newton-backend drevet av MuJoCo-Warp, avhengig av deres spesifikke simuleringskrav. På lignende måte har rendringsiden nå et pluggbart system som støtter OVRTX, Isaac RTX, Newton Warp og lettvektige visualisatorer som Rerun og Viser. Denne fleksibiliteten sikrer at Isaac Lab kan møte de krevende behovene til robotikkforskere og ingeniører, og leverer eksplisitt utførelseskontroll, deterministisk simulering og høydensitets, hodeløse fysikkfunksjoner som er avgjørende for banebrytende AI-utvikling. Dette kontrollnivået er essensielt for å skape robuste akselerere tokenproduksjon i AI-fabrikker ved hjelp av enhetlige tjenester og sanntids AI.

Fremtiden for fysisk AI-integrasjon

Utgivelsen av NVIDIA Omniverse-bibliotekene markerer et avgjørende øyeblikk for industri- og robotikkbedrifter. Ved å tilby en granulær, høyytelses vei for å integrere fysiske AI-funksjoner, gir NVIDIA selskaper mulighet til å akselerere sin digitale transformasjonsreise. Industrilere som ABB Robotics, PTC, Siemens og Synopsys tester allerede disse bibliotekene, og integrerer avansert simulering og opprettelse av digitale tvillinger i sine eksisterende PLM/PDM- og CI/CD-systemer. Denne utbredte adopsjonen signaliserer en klar trend mot mer fleksible, skalerbare og intelligente utviklingsarbeidsflyter, der fysisk AI ikke bare er en ambisjon, men en tilgjengelig, integrert virkelighet. Etter hvert som disse bibliotekene nærmer seg generell tilgjengelighet, lover de å låse opp enestående innovasjonsnivåer innen design, ingeniørfag og produksjon.

Ofte stilte spørsmål

What are NVIDIA Omniverse libraries and what problem do they solve for developers?
NVIDIA Omniverse libraries represent a new, modular architecture that exposes core Omniverse components like RTX rendering (ovrtx), PhysX-based simulation (ovphysx), and data storage pipelines (ovstorage) as standalone C APIs with C++ and Python bindings. This approach allows developers to integrate specific, high-fidelity physical AI capabilities directly into their existing industrial and robotics software stacks without the need to adopt the entire Omniverse platform. This solves the challenge of monolithic runtimes, enabling better scalability, headless deployment, and seamless integration with existing CI/CD systems and application frameworks, significantly reducing the need for extensive architectural rewrites.
How do 'ovrtx', 'ovphysx', and 'ovstorage' enhance existing applications with physical AI capabilities?
The trio of 'ovrtx', 'ovphysx', and 'ovstorage' offers distinct yet complementary functionalities for physical AI integration. 'ovrtx' provides high-fidelity, real-time path-traced rendering and sensor simulation, crucial for multimodal robotics perception and synthetic data generation. 'ovphysx' delivers high-speed, USD-native physics simulation, essential for robotics training and real-time control loops. 'ovstorage' establishes unified physical AI data pipelines, allowing seamless connection of existing PLM/PDM infrastructure to Omniverse, facilitating large-scale distributed data management and avoiding costly manual data migrations. Together, these libraries enable granular, performant integration of advanced simulation and data management.
What is the Model Context Protocol (MCP) and how does it facilitate agentic orchestration within Omniverse?
The Model Context Protocol (MCP) is a crucial mechanism within Omniverse that enables LLM-based agents to interact with and orchestrate physical AI simulations. MCP servers describe operations (e.g., loading USD scenes, editing prims, stepping simulation) in a machine-readable schema. This allows intelligent agents, powered by large language models, to browse available APIs, generate scene code, and manipulate simulation elements based on high-level descriptions. By handling the low-level remote procedure calls (RPCs) to Omniverse, MCP empowers developers to focus on defining sophisticated agent behaviors and guardrails, significantly scaling and automating complex simulation workflows for physical AI.
How has NVIDIA Isaac Lab benefited from the transition to a modular, library-based architecture?
NVIDIA Isaac Lab, a high-performance robotics simulation framework for reinforcement learning, has significantly benefited from transitioning to a modular architecture powered by ovphysx and ovrtx in its 3.0 Beta release. This shift enables explicit execution control, deterministic simulation, and the ability to run high-density, headless physics without reliance on UI dependencies. Developers now have the flexibility to choose between 'ovphysx' or a Kit-less Newton backend based on their simulation needs and can leverage a pluggable renderer system that supports OVRTX, Isaac RTX, and other visualizers. This modularity ensures Isaac Lab meets the extreme scalability and deterministic control requirements for advanced robotics training.
Which major industrial companies are currently piloting NVIDIA Omniverse libraries and for what purposes?
Leading industrial companies such as ABB Robotics, PTC, Siemens, and Synopsys are currently piloting NVIDIA Omniverse libraries. These companies are leveraging the modular architecture to integrate high-fidelity simulation, create advanced digital twins, and enable scalable physical AI capabilities directly within their existing design, engineering, and manufacturing workflows. This allows them to validate robot designs, optimize industrial systems, and enhance product lifecycle management (PLM/PDM) and continuous integration/continuous deployment (CI/CD) systems, all before physical prototypes are ever built, signaling a significant shift towards AI-driven industrial transformation.
What are the immediate benefits of using Omniverse libraries compared to the full Omniverse container stack for existing applications?
The immediate benefits of using Omniverse libraries over the full container stack for existing applications include significantly reduced architectural friction and faster integration. Developers can selectively embed specific Omniverse capabilities—like advanced rendering or physics simulation—into their current software without undergoing major overhauls. This approach allows for headless deployment, better scalability of simulations, and direct tensorized data exchange. It addresses previous bottlenecks such as framework lock-in, UI dependencies, and architectural rigidity, offering a streamlined path to leveraging NVIDIA's powerful physical AI technologies within established industrial and robotics ecosystems.

Hold deg oppdatert

Få de siste AI-nyhetene i innboksen din.

Del