Bibliotekat Omniverse: Integrimi i AI Fizik për Aplikacionet Ekzistuese

Bibliotekat NVIDIA Omniverse Zbulohen: Fuqizimi i Integrimit të AI Fizik

Në GTC 2026, NVIDIA njoftoi një evolucion të rëndësishëm për platformën e saj Omniverse, duke prezantuar një arkitekturë modulare, të bazuar në biblioteka, të dizajnuar për të integruar pa probleme aftësitë e avancuara të AI fizik në aplikacionet ekzistuese. Ky ndryshim paradigmatik adreson një nevojë kritike në zhvillimin industrial dhe robotik, ku kohët e ekzekutimit monolitik shpesh pengojnë shkallëzueshmërinë, vendosjen pa kokë (headless deployment) dhe integrimin me sistemet e themeluara CI/CD. Duke ekspozuar komponentët thelbësorë të Omniverse—renderimin RTX, simulimin e bazuar në PhysX dhe tubacionet e ruajtjes së të dhënave—si API C të pavarura me lidhje C++ dhe Python, NVIDIA po u mundëson zhvilluesve të ngulitin funksionalitete të fuqishme të binjakëve dixhitalë në kohë reale dhe të AI fizik pa kërkuar një rishikim të plotë arkitekturor. Kjo modularitet demokratizon aksesin në simulim me besnikëri të lartë, duke e bërë AI fizik një realitet të arritshëm për një gamë më të gjerë ndërmarrjesh.

AI fizik, i përcaktuar si sisteme AI që perceptojnë, arsyetojnë dhe veprojnë brenda mjediseve të simuluara fizikisht, po transformon me shpejtësi mënyrën se si industritë projektojnë dhe vërtetojnë sisteme komplekse. Nga lëvizjet e krahëve robotikë te paraqitjet e të gjitha fabrikave, trajnimi dhe vërtetimi i politikave të AI në një mjedis binjakësh dixhitalë redukton ndjeshëm kostot dhe përshpejton ciklet e zhvillimit. Bibliotekat e reja Omniverse, duke përfshirë 'ovrtx', 'ovphysx' dhe 'ovstorage', janë caktuar të jenë gurthemeli i këtij transformimi, duke lejuar bizneset të pasurojnë softuerin e tyre pronësor me teknologjinë më të fundit të simulimit të NVIDIA.

Arkitekturë Modulare për Integrim të Pandërprerë të AI Fizik

Prezantimi i një arkitekture 'biblioteka-së pari' ndryshon rrënjësisht mënyrën se si zhvilluesit ndërveprojnë me ekosistemin NVIDIA Omniverse. Në vend që të adoptojnë një kornizë të plotë aplikacioni, ekipet tani mund të thërrasin në mënyrë selektive API-të e renderimit, fizikës dhe ruajtjes së Omniverse direkt nga proceset dhe shërbimet e tyre. Kjo qasje eliminon sfidat që lidhen me bllokimin e kornizës, varësitë e ndërfaqes së përdoruesit dhe rigiditetin arkitekturor që shpesh shoqërojnë adoptimet e softuerit në shkallë të gjerë.

Ky dizajn modular është veçanërisht i dobishëm për zhvilluesit me grupe softuerësh të themeluara, duke u lejuar atyre të shfrytëzojnë aftësitë e fuqishme të Omniverse pa rishkrime arkitekturore shkatërruese. Bibliotekat janë inxhinieruar për vendosje "headless-first", duke siguruar performancë dhe shkallëzueshmëri optimale për aplikacionet industriale dhe robotike kërkuese. Kjo lëvizje strategjike nga NVIDIA nënvizon një angazhim ndaj fleksibilitetit dhe zgjidhjeve të përqendruara te zhvilluesit, duke pozicionuar Omniverse si një grup mjetesh të adaptueshme për të ardhmen e AI.

Bibliotekat Themelore Omniverse: ovrtx, ovphysx dhe ovstorage

Bibliotekat e sapo njoftuara ofrojnë aftësi të dallueshme por të ndërlidhura, secila e dizajnuar për të zgjidhur sfida specifike integrimi në zhvillimin e softuerit industrial. Ato shfrytëzojnë komponentët ekzistues të Omniverse si OpenUSD për përshkrimin e skenës dhe asetet SimReady për mjedise simulimi me cilësi të lartë, duke siguruar një përvojë zhvillimi kohezive dhe të fuqishme.

Biblioteka	Aftësitë Kryesore	Ndikimi Inxhinierik
ovrtx	Simulim i gjurmimit të shtegut në kohë reale me besnikëri të lartë, me performancë të lartë dhe simulim sensorësh	Integron renderimin RTX të nivelit të lartë direkt në aplikacionet ekzistuese, duke mundësuar perceptimin multimodal të robotikës, gjenerimin e avancuar të të dhënave sintetike dhe reagime vizuale shumë realiste për binjakët dixhitalë dhe mjediset e simuluara.
ovphysx	Simulim fizik me shpejtësi të lartë, vendas USD	Shton simulim fizik të lehtë, të përshpejtuar nga hardueri në aplikacione, duke lehtësuar shkëmbimin e të dhënave me shpejtësi të lartë për trajnimin e robotikës, integrimin e qarkut të kontrollit në kohë reale dhe ndërveprimet fizike të sakta në skenarë industrialë kompleksë.
ovstorage	Tubacione të unifikuara të të dhënave të AI fizik	Lidh infrastrukturën ekzistuese të ruajtjes dhe PLM/PDM direkt me ekosistemin Omniverse nëpërmjet një biblioteke të drejtuar nga API. Kjo mundëson menaxhimin e të dhënave të shpërndara në shkallë të gjerë dhe performancë të lartë, duke shmangur në mënyrë thelbësore migrimet manuale të të dhënave të kushtueshme dhe që kërkojnë shumë kohë për vendosjet në nivel ndërmarrjeje.

Këto biblioteka janë aktualisht në akses të hershëm në GitHub dhe NGC, me NVIDIA që mbledh në mënyrë aktive reagime dhe planifikon një version prodhimi me stabilitet API më vonë këtë vit. Testimi i brendshëm në grupe me performancë të lartë si NVIDIA Isaac Lab dhe Blueprint i Omniverse DSX siguron që ato të plotësojnë kërkesat e rrepta të ndërmarrjeve përpara disponueshmërisë së përgjithshme.

Orkestrimi Agjentik me Protokollin e Kontekstit të Modelit (MCP)

Për të përmirësuar më tej dobinë e këtyre bibliotekave, veçanërisht në fushën e lulëzuar të agjentëve të AI, Omniverse prezanton aftësi për orkestrim agjentik nëpërmjet serverëve të Protokollit të Kontekstit të Modelit (MCP). Këta serverë janë të dizajnuar për ta bërë simulimin të përdorshëm nga agjentët e bazuar në LLM duke përshkruar operacionet—si ngarkimi i skenave USD, redaktimi i 'prims', ose kalimi nëpër simulime—në një skemë të lexueshme nga makina. Kjo lejon mjetet e AI, si LLM-të e avancuara, të thërrasin funksionalitetet e Omniverse në mënyrë të sigurt dhe efektive.

Agjentët Kit USD, për shembull, janë një koleksion serverësh MCP për Kit, USD dhe OmniUI, duke u mundësuar agjentëve të shfletojnë API-të, të gjenerojnë kod skene dhe të manipulojnë elementet e UI ose hierarkitë e shtresave bazuar në përshkrime tekstuale të nivelit të lartë. Kjo u jep fuqi zhvilluesve të përcaktojnë sjellje dhe mbrojtje agjenti të sofistikuara, duke shkarkuar kompleksitetin e lidhjes manuale të çdo thirrjeje API simulimi. Për shkallëzimin e këtyre rrjedhave të punës të avancuara, zhvilluesit mund të shfrytëzojnë NemoClaw, një grup infrastrukture për komunitetin OpenClaw që vendos agjentë të sigurt dhe autonomë brenda sandboxes të izoluar dhe të mbrojtur nga politika. Ky zhvillim hap rrugën për mjedise simulimi gjithnjë e më autonome dhe inteligjente, duke përshpejtuar zhvillimin e sistemeve komplekse të AI fizik dhe duke mbështetur vlerësimin e fuqishëm të agjentëve të AI për prodhim – një udhëzues praktik për vlerësimet e 'strands'.

Fillimi i shpejtë me Docker për serverët MCP thjeshton vendosjen, duke lejuar zhvilluesit të përdorin shërbimet e embedder dhe reranker të NVIDIA të hostuara në cloud pa GPU lokale, duke kërkuar vetëm një çelës API të NVIDIA.

Studim Rasti: Optimizimi i NVIDIA Isaac Lab me Biblioteka Modulare

Përfitimet praktike të kësaj qasjeje modulare demonstrohen në mënyrë të gjallë nga evolucioni inxhinierik i vazhdueshëm i NVIDIA Isaac Lab. Si një kornizë simulimi robotikësh me performancë të lartë, thelbësore për mësimin përforcues (RL), Isaac Lab kërkon shkallëzueshmëri ekstreme dhe kontroll determinist.

Me Isaac Lab 3.0 Beta, NVIDIA ka kaluar me sukses shtresën e saj themelore nga korniza tradicionale monolitike Kit në një arkitekturë modulare me shumë mbështetje. Kjo u mundëson zhvilluesve të zgjedhin midis 'ovphysx'—një bibliotekë e pavarur që mbështjell SDK-në e PhysX—ose një mbështetje Newton pa Kit, të fuqizuar nga MuJoCo-Warp, në varësi të kërkesave të tyre specifike të simulimit. Ngjashëm, ana e renderimit tani përmban një sistem të ndërrueshëm që mbështet OVRTX, Isaac RTX, Newton Warp dhe vizualizues të lehtë si Rerun dhe Viser. Kjo fleksibilitet siguron që Isaac Lab të mund të plotësojë nevojat kërkuese të studiuesve dhe inxhinierëve të robotikës, duke ofruar kontroll të qartë ekzekutimi, simulim determinist dhe aftësi fizike me densitet të lartë, pa kokë (headless), thelbësore për zhvillimin e AI-së së fundit. Ky nivel kontrolli është thelbësor për krijimin e shërbimeve të unifikuara dhe AI në kohë reale për të përshpejtuar prodhimin e tokenëve në fabrikat e AI.

E Ardhmja e Integrimit të AI Fizik

Lëshimi i bibliotekave NVIDIA Omniverse shënon një moment kyç për ndërmarrjet industriale dhe robotike. Duke ofruar një rrugë të hollësishme dhe me performancë të lartë për të integruar aftësitë e AI fizik, NVIDIA po fuqizon kompanitë të përshpejtojnë udhëtimin e tyre të transformimit dixhital. Udhëheqësit e industrisë si ABB Robotics, PTC, Siemens dhe Synopsys tashmë po pilotonin këto biblioteka, duke integruar simulime të avancuara dhe krijimin e binjakëve dixhitalë në sistemet e tyre ekzistuese PLM/PDM dhe CI/CD. Kjo adoptim i gjerë sinjalizon një trend të qartë drejt rrjedhave të punës zhvilluese më fleksibile, të shkallëzueshme dhe inteligjente, ku AI fizik nuk është thjesht një aspiratë, por një realitet i arritshëm dhe i integruar. Ndërsa këto biblioteka shkojnë drejt disponueshmërisë së përgjithshme, ato premtojnë të zhbllokojnë nivele të papara inovacioni nëpër dizajn, inxhinieri dhe prodhim.

Burimi origjinal

https://developer.nvidia.com/blog/integrate-physical-ai-capabilities-into-existing-apps-with-nvidia-omniverse-libraries/

Pyetjet e bëra shpesh

What are NVIDIA Omniverse libraries and what problem do they solve for developers?

NVIDIA Omniverse libraries represent a new, modular architecture that exposes core Omniverse components like RTX rendering (ovrtx), PhysX-based simulation (ovphysx), and data storage pipelines (ovstorage) as standalone C APIs with C++ and Python bindings. This approach allows developers to integrate specific, high-fidelity physical AI capabilities directly into their existing industrial and robotics software stacks without the need to adopt the entire Omniverse platform. This solves the challenge of monolithic runtimes, enabling better scalability, headless deployment, and seamless integration with existing CI/CD systems and application frameworks, significantly reducing the need for extensive architectural rewrites.

How do 'ovrtx', 'ovphysx', and 'ovstorage' enhance existing applications with physical AI capabilities?

The trio of 'ovrtx', 'ovphysx', and 'ovstorage' offers distinct yet complementary functionalities for physical AI integration. 'ovrtx' provides high-fidelity, real-time path-traced rendering and sensor simulation, crucial for multimodal robotics perception and synthetic data generation. 'ovphysx' delivers high-speed, USD-native physics simulation, essential for robotics training and real-time control loops. 'ovstorage' establishes unified physical AI data pipelines, allowing seamless connection of existing PLM/PDM infrastructure to Omniverse, facilitating large-scale distributed data management and avoiding costly manual data migrations. Together, these libraries enable granular, performant integration of advanced simulation and data management.

What is the Model Context Protocol (MCP) and how does it facilitate agentic orchestration within Omniverse?

The Model Context Protocol (MCP) is a crucial mechanism within Omniverse that enables LLM-based agents to interact with and orchestrate physical AI simulations. MCP servers describe operations (e.g., loading USD scenes, editing prims, stepping simulation) in a machine-readable schema. This allows intelligent agents, powered by large language models, to browse available APIs, generate scene code, and manipulate simulation elements based on high-level descriptions. By handling the low-level remote procedure calls (RPCs) to Omniverse, MCP empowers developers to focus on defining sophisticated agent behaviors and guardrails, significantly scaling and automating complex simulation workflows for physical AI.

How has NVIDIA Isaac Lab benefited from the transition to a modular, library-based architecture?

NVIDIA Isaac Lab, a high-performance robotics simulation framework for reinforcement learning, has significantly benefited from transitioning to a modular architecture powered by ovphysx and ovrtx in its 3.0 Beta release. This shift enables explicit execution control, deterministic simulation, and the ability to run high-density, headless physics without reliance on UI dependencies. Developers now have the flexibility to choose between 'ovphysx' or a Kit-less Newton backend based on their simulation needs and can leverage a pluggable renderer system that supports OVRTX, Isaac RTX, and other visualizers. This modularity ensures Isaac Lab meets the extreme scalability and deterministic control requirements for advanced robotics training.

Which major industrial companies are currently piloting NVIDIA Omniverse libraries and for what purposes?

Leading industrial companies such as ABB Robotics, PTC, Siemens, and Synopsys are currently piloting NVIDIA Omniverse libraries. These companies are leveraging the modular architecture to integrate high-fidelity simulation, create advanced digital twins, and enable scalable physical AI capabilities directly within their existing design, engineering, and manufacturing workflows. This allows them to validate robot designs, optimize industrial systems, and enhance product lifecycle management (PLM/PDM) and continuous integration/continuous deployment (CI/CD) systems, all before physical prototypes are ever built, signaling a significant shift towards AI-driven industrial transformation.

What are the immediate benefits of using Omniverse libraries compared to the full Omniverse container stack for existing applications?

The immediate benefits of using Omniverse libraries over the full container stack for existing applications include significantly reduced architectural friction and faster integration. Developers can selectively embed specific Omniverse capabilities—like advanced rendering or physics simulation—into their current software without undergoing major overhauls. This approach allows for headless deployment, better scalability of simulations, and direct tensorized data exchange. It addresses previous bottlenecks such as framework lock-in, UI dependencies, and architectural rigidity, offering a streamlined path to leveraging NVIDIA's powerful physical AI technologies within established industrial and robotics ecosystems.

Qëndroni të përditësuar

Merrni lajmet më të fundit të AI në email.

Ndaj