NVIDIA Agent Toolkit é ampliado com novas bibliotecas do Omniverse, permitindo que os agentes de IA trabalhem na construção de mundos para simulação
O NVIDIA Agent Toolkit agora inclui as bibliotecas do NVIDIA Omniverse, o que oferece aos agentes de IA ferramentas e recursos para ajudar os desenvolvedores de software a integrar recursos de IA física em suas aplicações existentes;
A NVIDIA anuncia que o NVIDIA Agent Toolkit agora inclui as bibliotecas do NVIDIA Omniverse™, uma coleção de componentes de software que fornecem aos agentes de IA as ferramentas e habilidades necessárias para agregar recursos de IA física a aplicações existentes e preparar conteúdo 3D para simulação.
Robôs, fábricas e sistemas autônomos devem ser projetados, testados e treinados por meio de simulação antes de poderem funcionar no mundo real. A preparação de conteúdo 3D para simulação requer mais do que imagens realistas: os ativos devem possuir a estrutura, os materiais, a escala, as etiquetas, os sensores e as propriedades físicas adequadas. Com as bibliotecas do NVIDIA Omniverse incluídas no NVIDIA Agent Toolkit, os agentes de IA contam com as ferramentas e habilidades necessárias para criar fluxos de trabalho, inspecionar cenas, identificar problemas e preparar ativos, o que ajuda os desenvolvedores a passar mais rapidamente do conteúdo 3D para ambientes prontos para simulação.
NVIDIA Agent Toolkit com novas ferramentas
As novas bibliotecas do Omniverse para simulação de sensores NVIDIA RTX, simulação física acelerada por GPU e validação de recursos prontos para simulação estão disponíveis abertamente no GitHub;
“A era da IA física será construída primeiro em simulação”, afirma Jensen Huang, fundador e CEO da NVIDIA. “O NVIDIA Agent Toolkit, com as bibliotecas do Omniverse, leva agentes de IA para as ferramentas 3D que os desenvolvedores já utilizam, ajudando a criar mundos preparados para simulação, onde robôs, fábricas e sistemas autônomos podem ser treinados e testados muito antes de serem implementados no mundo real.”
Empresas de software como a SideFX e a PTC estão integrando as bibliotecas do Omniverse para simulação de sensores, física e validação de ativos preparados para agentes, o que contribui para incorporar a IA baseada em agentes às aplicações e fluxos de trabalho que desenvolvedores e artistas técnicos já utilizam para preparar conteúdo 3D.
A SideFX e a PTC estão integrando as bibliotecas do Omniverse em aplicações 3D para IA física, com suporte para sistemas de IA na nuvem e locais, desde o NVIDIA RTX Spark até o NVIDIA DGX Station;
“Estamos vivendo um momento decisivo para a transformação digital, e a simulação é a base sobre a qual esse futuro será construído. Continuamos firmes em nosso compromisso de oferecer à região o que há de mais avançado em IA física, e com o NVIDIA Agent Toolkit e as bibliotecas do Omniverse, setores como manufatura, robótica e engenharia agora contam com fluxos de trabalho prontos para simulação que aproximam a validação, os testes e a criação, gerando valor real e mais rápido para aqueles que constroem o futuro dia a dia”, comenta Marcio Aguiar, diretor da divisão Enterprise da NVIDIA para a América Latina.
Bibliotecas do Omniverse incorporam recursos de IA física ao NVIDIA Agent Toolkit
O NVIDIA Agent Toolkit ajuda os desenvolvedores de software a criar agentes de IA que conectam ferramentas, recursos e fontes de dados. As bibliotecas do Omniverse ampliam esses agentes para fluxos de trabalho de IA física e em 3D, com ferramentas invocáveis para simulação de sensores, física acelerada por GPU e validação de ativos prontos para simulação dentro de aplicações existentes.
Novo blueprint da NVIDIA para integrar as bibliotecas do Omniverse ao Blender.
As novas bibliotecas do Omniverse — incluindo ovrtx, ovphysx e os recursos CAD-to-SimReady — estão disponíveis abertamente no GitHub, oferecendo aos agentes de IA ferramentas para criar fluxos de trabalho destinados a inspecionar cenas, testar alterações e preparar ativos 3D para simulação. Também já está disponível no GitHub um novo blueprint para integrar as bibliotecas do Omniverse ao Blender.
Os principais recursos das bibliotecas do NVIDIA Agent Toolkit incluem:
Simulação de sensores NVIDIA RTX: o ovrtx ajuda as aplicações a gerar dados de câmeras, lidar, radar e outros sensores a partir de cenas 3D, para que desenvolvedores e agentes de IA possam testar como os sistemas de IA física podem perceber os ambientes virtuais.
Comportamento físico: o ovphysx utiliza física acelerada por GPU para proporcionar um comportamento realista às cenas 3D por meio de propriedades como colisões, massa, atrito e movimento, de modo que as equipes possam testar primeiro como os objetos e os sistemas interagem na simulação.
Objetos 3D prontos para simulação: os recursos do CAD-to-SimReady ajudam a converter dados de desenho assistido por computador (CAD) em tivos SimReady baseados em OpenUSD, o que confere ao conteúdo 3D as propriedades necessárias para a simulação física de IA e os testes virtuais.Desenvolvedores de software criam usando as bibliotecas do Omniverse
Empresas de desenvolvimento de software como a SideFX e a PTC, bem como as startups ForgeCAD, Lightwheel, Moonlake AI e Palatial, estão entre as primeiras a adotar e desenvolver com as bibliotecas do Omniverse, que agora fazem parte do NVIDIA Agent Toolkit.
A SideFX está utilizando fluxos de trabalho do OpenUSD, bem como as bibliotecas ovrtx e ovphysx, para explorar como os agentes podem ajudar a integrar as bibliotecas do Omniverse em seus fluxos de trabalho de criação de conteúdo 3D procedural no Houdini, o que oferece aos artistas técnicos uma maneira de gerar, testar a física e preparar conteúdo para simulação.
3D procedural
“A criação 3D procedural é essencial para construir os mundos complexos e controláveis necessários para simulação, robótica e IA industrial”, destaca Kim Davidson, presidente e diretor executivo da SideFX. “Com as bibliotecas do NVIDIA Omniverse e do OpenUSD, a SideFX está explorando como as ferramentas preparadas para agentes podem apoiar os fluxos de trabalho do Houdini, ajudando os artistas técnicos a revisarem, testar e preparar conteúdo procedural para simulação sem perder o controle do processo criativo.”
A plataforma CAD e de gerenciamento de dados de produtos (PDM) Onshape, da PTC, utiliza o OpenUSD e o ovrtx para conectar fluxos de trabalho de projeto nativos da nuvem à simulação física, o que ajuda a manter o conteúdo de projeto de produtos vinculado aos fluxos de trabalho de CAD, PDM, colaboração e simulação.
“As equipes de engenharia buscam formas mais integradas de projetar, colaborar e simular ao longo de todo o processo de desenvolvimento”, reforça Neil Barua, presidente e diretor executivo da PTC. “O trabalho da PTC com a NVIDIA apoia essa visão mais ampla, enquanto as bibliotecas do NVIDIA Omniverse ajudam a viabilizar fluxos de trabalho preparados para simulação que aproximam a validação e os testes do local onde os produtos são projetados”.
NVIDIA NemoClaw
Em exibição na SIGGRAPH, “SimReady” Blender é um fluxo de trabalho de demonstração criado no Blender com as bibliotecas do NVIDIA Omniverse e do do NVIDIA NemoClaw™, que mostra como os desenvolvedores de software podem adicionar recursos de simulação prontos para agentes — incluindo simulação de sensores NVIDIA RTX, física e validação — a aplicações 3D existentes, sem que os criadores percam o controle. Agora está disponível abertamente como um blueprint para integrar as bibliotecas do Omniverse ao Blender.
A demonstração também oferece uma prévia de como esses fluxos de trabalho, criados com as bibliotecas do Omniverse como parte do NVIDIA Agent Toolkit, podem ser executados localmente, desde sistemas compactos com tecnologia RTX e NVIDIA RTX Spark™ até sistemas com NVIDIA GB300 e NVIDIA DGX Station™. Os sistemas RTX Spark estarão disponíveis neste outono por meio da ASUS, Dell Technologies, HP, Lenovo, Microsoft Surface e MSI, e posteriormente serão adicionados modelos da Acer e da GIGABYTE. Os sistemas DGX Station já podem ser encomendados por meio da ASUS, Dell, GIGABYTE, HP, MSI, Supermicro e Exxact.
NVIDIA Inception program
As startups, incluindo aquelas que fazem parte do programa NVIDIA Inception, também estão utilizando as bibliotecas e os recursos do Omniverse para incorporar fluxos de trabalho de preparação de ativos e cenas assistidos por agentes. A Palatial está aplicando os recursos CAD-to-SimReady do Omniverse para automatizar a criação e a validação de ativos SimReady em grande escala a partir de dados CAD. A Lightwheel está empregando os Content Agents do Omniverse, com tecnologia OpenUSD, em sua tecnologia SimReadyGen para gerar ativos SimReady fisicamente precisos a partir de instruções de texto.
O ForgeCAD e o Moonlake AI estão explorando fluxos de trabalho de conteúdo 3D impulsionados por agentes que utilizam os recursos do Omniverse para ajudar a gerar, aprimorar e preparar ativos para simulação física com IA.
Assista à apresentação da NVIDIA na SIGGRAPH. Saiba mais sobre as bibliotecas do NVIDIA Omniverse e explore os exemplos e a documentação disponíveis.
Sobre a NVIDIA
Desde sua fundação em 1993, a NVIDIA (NASDAQ: NVDA) tem sido pioneira em computação acelerada. A invenção da GPU pela empresa em 1999 estimulou o crescimento do mercado de games para PC, redefiniu a computação gráfica, iniciou a era da IA moderna e tem ajudado a digitalização industrial em todos os mercados. A NVIDIA agora é uma empresa de infraestrutura de computação full-stack com soluções em escala de data center que estão revolucionando o setor.
Mais informações em: https://www.nvidia.com/pt-br/.
Acesse também:
Facebook: @NVIDIABrasil
Twitter: @NVIDIABrasil
YouTube: NVIDIA Latinoamérica
Instagram: @NVIDIABrasil