Nvidia anuncia novos modelos de IA generativa e microsserviços NIM

A Nvidia anunciou grandes avanços em Universal Scene Description (OpenUSD) que expandirão a adoção da estrutura de troca de dados 3D universais para a robótica, o design e a engenharia industriais e acelerarão as habilidades dos desenvolvedores para criarem mundos virtuais altamente precisos para a próxima evolução da IA.

Por meio da IA generativa baseada no novo OpenUSD e nas estruturas de desenvolvimento aceleradas da Nvidia baseadas na plataforma Nvidia Omniverse, mais setores já podem desenvolver aplicações para visualização de projetos de design e engenharia industrial e para simulação de ambientes para criarem a próxima onda de IA física e robôs.

As novas ofertas incluem microsserviços Nvidia NIM para modelos de IA que podem gerar linguagem do OpenUSD para responderem às solicitações dos usuários, gerarem código Python do OpenUSD, aplicarem materiais a objetos 3D e compreenderem o espaço e a física 3D para ajudarem a acelerar o desenvolvimento de digital twins. Além disso, os novos formatos de dados e ferramentas para desenvolvedores dos conectores de USD para robótica e simulação industrial permitem que os usuários transmitam conjuntos de dados Nvidia RTX massivos com ray tracing total para o Apple Vision Pro.

“O boom da IA generativa para as indústrias pesadas já chegou”, afirma Rev Lebaredian, vice-presidente de Tecnologia de Omniverse e simulação da Nvidia. “Até recentemente, os mundos digitais estavam sendo usados principalmente por setores criativos; agora, com os aperfeiçoamentos e a acessibilidade que os microsserviços Nvidia NIM estão trazendo ao OpenUSD, indústrias de todos os tipos podem criar mundos virtuais e digital twins com base física para estimularem a inovação enquanto se preparam para a próxima onda da IA: a robótica”, comentou.

“Estamos vivenciando um momento transformador na indústria com a integração de IA generativa e microserviços Nvidia NIM ao OpenUSD. Essas inovações não apenas ampliam a adoção de nosso framework universal 3D em setores como robótica e design industrial, mas também aceleram a criação de digital twins e simulações físicas avançadas”, destacou Marcio Aguiar, diretor da divisão Enterprise da Nvidia para América Latina.

IA generativa chega ao USD com os Nvidia NIM

Os primeiros modelos de IA generativa do mundo para desenvolvimento do OpenUSD desenvolvidos pela Nvidia estarão disponíveis como microsserviços Nvidia NIM. Os modelos permitem que os desenvolvedores incorporem copilotos e agentes de IA generativa aos fluxos de trabalho do USD, ampliando as possibilidades nos mundos 3D e ajudando a acelerar a adoção do USD em uma nova gama de setores industriais, como manufatura, automóveis e robôs.

Os microsserviços disponíveis na visualização são:

Microsserviço NIM de Código de USD – responde a perguntas do OpenUSD de conhecimento geral e gera automaticamente código OpenUSD-Python baseado em prompts de texto que podem ser inseridos na aplicação de visualização do OpenUSD, como o usdview da Pixar, ou em uma aplicação baseada no kit do NVIDIA Omniverse para visualizar os dados 3D correspondentes.

Microsserviço NIM de Pesquisa de USD – permite que os desenvolvedores façam pesquisas em bibliotecas gigantescas do OpenUSD, 3D e dados de imagens usando linguagem natural ou entradas de imagem.

Microsserviço NIM de Validação de USD – verifica a compatibilidade dos arquivos carregados em relação às versões de lançamento do OpenUSD e gera uma imagem totalmente renderizada por RTX, com rastreamento de caminho, alimentada pelas APIs do Nvidia Omniverse Cloud ou por interfaces de programação de aplicações.

Os microsserviços recém-anunciados que estarão disponíveis em breve são:

Microsserviço NIM de Layout de USD – permite que os usuários montem cenas baseadas no OpenUSD de uma série de prompts de texto baseados em inteligência espacial.
Microsserviço NIM de Material Inteligente de USD – prevê e aplica um material realista a um objeto de design auxiliado por computador.

Microsserviço NIM de Geração de Malha fVDB – gera uma malha baseada em OpenUSD, renderizada pelas APIs do Omniverse Cloud, a partir de dados de um cloud de pontos.

Microsserviço NIM de super-resolução de física fVDB – executa a Super-Resolução de IA em um quadro ou sequência de quadros para gerar uma simulação de física de alta resolução baseada em OpenUSD.

Microsserviço NIM NeRF-XL fVDB – gera campos de iluminação neural em larga escala usando APIs do Omniverse Cloud.

Os conectores do USD levam a IA generativa a mais setores

Uma série de novos conectores do USD para formatos de dados de robótica e streaming para Apple Vision Pro abre as portas da interoperabilidade e autoração avançada do OpenUSD para mais setores.

A Nvidia e a Siemens, empresa global de automação e software industriais, estão expandindo sua colaboração para facilitarem a execução de mais cargas de trabalho industriais usando o OpenUSD. A Siemens vai integrar os pipelines de OpenUSD ao seu portfólio Simcenter de tecnologias de simulação para apoiarem a tomada de decisões baseada em evidências e colaboração entre os principais envolvidos.

Essa integração permite a visualização fotorrealista de alta fidelidade em tempo real de dados de simulações complexas, oferecendo insights mais profundos quanto ao desempenho de um produto dentro de seu ambiente operacional no mundo real. O trabalho será baseado nos esforços da Siemens para incorporar o Omniverse ao seu portfólio de Gerenciamento de ciclo de vida de produto do Teamcenter.

A Nvidia também lançou um conector do Unified Robotics Description Format para OpenUSD, permitindo que os roboticistas transfiram suavemente seus dados robóticos entre aplicações, incluindo aquelas de design, simulação e aprendizagem de reforço.

Para levar a expansão do Ecossistema OpenUSD ainda mais longe, a Nvidia anuncia o kit de desenvolvimento de software OpenUSD Exchange, permitindo que os desenvolvedores criem seus próprios conectores de dados OpenUSD robustos.

Novas ferramentas e APIs para desenvolvedores para transmitir cenas OpenUSD em grande escala de um aplicativo criado na plataforma Omniverse para o Apple Vision Pro por meio da Rede de Entrega de Gráficos Nvidia já estão disponíveis em acesso antecipado.