Novos recursos permitem a desenvolvedores integrar simulação de sensores, física acelerada por GPU e preparação de ativos 3D a aplicações existentes; SideFX e PTC estão entre as empresas que exploram a tecnologia
A NVIDIA anunciou a ampliação do NVIDIA Agent Toolkit com a inclusão das bibliotecas do NVIDIA Omniverse, coleção de componentes de software que oferece aos agentes de inteligência artificial ferramentas para incorporar recursos de IA física a aplicações existentes e preparar conteúdos 3D para simulação.
A novidade busca facilitar o desenvolvimento de ambientes virtuais nos quais robôs, fábricas e sistemas autônomos possam ser projetados, testados e treinados antes de operar no mundo real. Para isso, os ativos 3D precisam reunir não apenas imagens realistas, mas também estrutura, materiais, escala, etiquetas, sensores e propriedades físicas adequadas à simulação.
Com as bibliotecas do Omniverse integradas ao NVIDIA Agent Toolkit, os agentes de IA passam a contar com recursos para criar fluxos de trabalho, inspecionar cenas, identificar problemas e preparar ativos. Segundo a empresa, a combinação ajuda os desenvolvedores a acelerar a transformação de conteúdos 3D em ambientes preparados para simulação.
“A era da IA física será construída primeiro em simulação”, afirma Jensen Huang, fundador e CEO da NVIDIA. “O NVIDIA Agent Toolkit, com as bibliotecas do Omniverse, leva agentes de IA para as ferramentas 3D que os desenvolvedores já utilizam, ajudando a criar mundos preparados para simulação, onde robôs, fábricas e sistemas autônomos podem ser treinados e testados muito antes de serem implementados no mundo real.”
Bibliotecas ampliam recursos de simulação
As novas bibliotecas do Omniverse ampliam o NVIDIA Agent Toolkit para fluxos de trabalho de IA física e 3D. Entre os recursos estão ferramentas para simulação de sensores, física acelerada por GPU e validação de ativos preparados para simulação, que podem ser utilizadas dentro de aplicações existentes.
As bibliotecas ovrtx, ovphysx e os recursos CAD-to-SimReady estão disponíveis abertamente no GitHub. A NVIDIA também disponibilizou um blueprint para integrar as bibliotecas do Omniverse ao Blender.
O ovrtx permite que aplicações gerem dados de câmeras, lidar, radar e outros sensores a partir de cenas 3D. A proposta é permitir que desenvolvedores e agentes de IA testem como sistemas de IA física podem perceber ambientes virtuais.
Já o ovphysx utiliza física acelerada por GPU para proporcionar comportamento às cenas 3D por meio de propriedades como colisões, massa, atrito e movimento. Com isso, as equipes podem testar em simulação como objetos e sistemas interagem.
Os recursos CAD-to-SimReady, por sua vez, ajudam a converter dados de desenho assistido por computador (CAD) em ativos SimReady baseados em OpenUSD, atribuindo ao conteúdo 3D propriedades necessárias para simulação física de IA e testes virtuais.
“Estamos vivendo um momento decisivo para a transformação digital, e a simulação é a base sobre a qual esse futuro será construído. Continuamos firmes em nosso compromisso de oferecer à região o que há de mais avançado em IA física, e com o NVIDIA Agent Toolkit e as bibliotecas do Omniverse, setores como manufatura, robótica e engenharia agora contam com fluxos de trabalho prontos para simulação que aproximam a validação, os testes e a criação, gerando valor real e mais rápido para aqueles que constroem o futuro dia a dia”, comenta Marcio Aguiar, diretor da divisão Enterprise da NVIDIA para a América Latina.
NVIDIA apresenta fluxo de trabalho para Blender
Em exibição na SIGGRAPH, o “SimReady” Blender é um fluxo de trabalho de demonstração criado no Blender com as bibliotecas do NVIDIA Omniverse e do NVIDIA NemoClaw. A demonstração mostra como desenvolvedores podem adicionar recursos de simulação preparados para agentes, incluindo simulação de sensores NVIDIA RTX, física e validação, a aplicações 3D existentes.
O fluxo de trabalho está disponível abertamente como um blueprint para integrar as bibliotecas do Omniverse ao Blender. A demonstração também apresenta como esses fluxos de trabalho podem ser executados localmente, utilizando sistemas compactos com tecnologia RTX e NVIDIA RTX Spark até sistemas com NVIDIA GB300 e NVIDIA DGX Station.
Os sistemas RTX Spark estarão disponíveis neste outono por meio da ASUS, Dell Technologies, HP, Lenovo, Microsoft Surface e MSI, com modelos da Acer e da GIGABYTE previstos posteriormente. Os sistemas DGX Station já podem ser encomendados por meio da ASUS, Dell, GIGABYTE, HP, MSI, Supermicro e Exxact.
Empresas e startups exploram aplicações
Empresas de desenvolvimento de software como SideFX e PTC, além das startups ForgeCAD, Lightwheel, Moonlake AI e Palatial, estão entre as primeiras a adotar e desenvolver com as bibliotecas do Omniverse incorporadas ao NVIDIA Agent Toolkit.
A SideFX utiliza fluxos de trabalho do OpenUSD e as bibliotecas ovrtx e ovphysx para explorar a integração desses recursos aos processos de criação de conteúdo 3D procedural no Houdini. A iniciativa busca oferecer aos artistas técnicos uma forma de gerar, testar a física e preparar conteúdos para simulação.
“A criação 3D procedural é essencial para construir os mundos complexos e controláveis necessários para simulação, robótica e IA industrial”, destaca Kim Davidson, presidente e diretor executivo da SideFX. “Com as bibliotecas do NVIDIA Omniverse e do OpenUSD, a SideFX está explorando como as ferramentas preparadas para agentes podem apoiar os fluxos de trabalho do Houdini, ajudando os artistas técnicos a revisarem, testar e preparar conteúdo procedural para simulação sem perder o controle do processo criativo.”
A plataforma de CAD e gerenciamento de dados de produtos (PDM) Onshape, da PTC, utiliza OpenUSD e ovrtx para conectar fluxos de trabalho de projetos nativos da nuvem à simulação física. A proposta é manter o conteúdo de projeto de produtos vinculado aos processos de CAD, PDM, colaboração e simulação.
“As equipes de engenharia buscam formas mais integradas de projetar, colaborar e simular ao longo de todo o processo de desenvolvimento”, reforça Neil Barua, presidente e diretor executivo da PTC. “O trabalho da PTC com a NVIDIA apoia essa visão mais ampla, enquanto as bibliotecas do NVIDIA Omniverse ajudam a viabilizar fluxos de trabalho preparados para simulação que aproximam a validação e os testes do local onde os produtos são projetados”, conclui.
