A empresa de tecnologia NVIDIA lançou uma visão detalhada das bibliotecas de software e modelos de IA cuMotion, nvblox, FoundationPose e FoundationStereo incluídos na plataforma NVIDIA Isaac Manipulator, que são projetados para aprimorar a eficiência operacional de braços robóticos impulsionados por IA.
Esses componentes acelerados por GPU têm como objetivo fornecer planejamento de movimento em tempo real, mapeamento espacial detalhado e percepção de profundidade precisa, visando apoiar a implementação de soluções de automação avançadas com redução na complexidade de integração. O NVIDIA Isaac Manipulator é estruturado como um conjunto de software integrado que facilita a implementação de funções sofisticadas de manipulador robótico em contextos industriais, utilizando tecnologias de GPU de alto desempenho.
A biblioteca cuMotion fornece planejamento de movimento, geração de trajetórias e capacidades de cinemática inversa usando aceleração por GPU, contribuindo para uma execução de movimento mais rápida e sem colisões, mesmo em ambientes com altas restrições espaciais. Isso visa melhorar a confiabilidade e a precisão operacional, particularmente em configurações que exigem padrões de desempenho rigorosos. A ferramenta nvblox suporta mapeamento 3D em tempo real, permitindo que sistemas robóticos interpretem e se ajustem a ambientes espaciais em mudança. Essa função é projetada para aprimorar a evasão de obstáculos e manter condições operacionais seguras.
O FoundationPose oferece estimativa de pose de seis graus de liberdade usando entrada RGB-D e foi construído para manter a precisão em condições de iluminação variável, superfícies reflexivas e formas de objetos diversas. Para abordar a disponibilidade limitada de dados de treinamento do mundo real para modelos de IA robótica, a NVIDIA utilizou geração de dados sintéticos via Isaac Sim para produzir mais de cinco milhões de imagens, seguidas de treinamento em um sistema GPU V100. Isso resultou em um modelo zero-shot capaz de implantação imediata sem treinamento ou ajuste adicional, com a capacidade de generalizar para novos objetos.
O FoundationStereo suporta estimativa de profundidade estéreo precisa, permitindo interação confiável com ambientes circundantes. Suas capacidades foram projetadas para funcionar efetivamente mesmo em condições industriais complexas, desordenadas ou dinâmicas. O modelo é treinado em um grande conjunto de dados sintéticos e é capaz de produzir resultados de alta qualidade usando hardware de custo acessível, como sensores Intel RealSense. As contribuições técnicas do FoundationStereo foram reconhecidas com uma Nomeação de Melhor Artigo na CVPR 2025, marcando-o como um dos poucos selecionados entre milhares de submissões.
Estamos animados para compartilhar como o MachineMotion AI da Vention, alimentado pelo #NVIDIAIsaac Manipulator, torna mais fácil do que nunca implantar robôs impulsionados por IA em grande escala.
Os desenvolvedores se beneficiam de:
Planejamento de movimento avançado Percepção em tempo real acelerada por GPU Monitoramento remoto robusto… pic.twitter.com/eckGn3MAOM
— NVIDIA Robotics (@NVIDIARobotics) 24 de junho de 2025
Principais Aplicações Do MachineMotion AI da Vention
O MachineMotion AI da Vention é um controlador de automação industrial desenvolvido para suportar a integração de robótica habilitada por IA em ambientes de manufatura. Construído sobre o NVIDIA Jetson Orin e equipado com conectividade celular, o controlador tem como objetivo facilitar a implantação rápida, computação de borda no local e gerenciamento remoto de sistemas robóticos, enquanto reduz a complexidade da infraestrutura.
Um dos principais usos do sistema envolve operações robóticas de pegar e colocar realizadas diretamente na borda. O hardware integrado NVIDIA Jetson Orin permite a detecção e posicionamento de objetos em tempo real dentro da própria unidade robótica, o que minimiza atrasos de processamento e evita dependência de infraestrutura de computação externa.
Outra área de aplicação envolve supervisão remota, onde a conectividade celular integrada do controlador permite diagnósticos off-site, monitoramento do sistema e atualizações para componentes de software, reduzindo assim a necessidade de chamadas de serviço físico.
MachineMotion AI também é utilizado em ambientes de produção dinâmicos onde as configurações robóticas precisam ser ajustadas com frequência. A compatibilidade do sistema com o NVIDIA Isaac Manipulator e o uso de um ambiente de software de baixo código ajudam os fabricantes a adaptar células robóticas a tarefas e fluxos de trabalho variados. Essa adaptabilidade é particularmente útil para acomodar mudanças no design do produto ou alterações nos requisitos de produção.
Ao combinar processamento de IA de borda com integração simplificada, o MachineMotion AI suporta estratégias de automação robótica escaláveis e responsivas em contextos industriais e estende as capacidades funcionais das ferramentas de software NVIDIA Isaac.
Caso Representativo: Sistema de Coleta Aleatória de Bin
Uma aplicação prática do sistema combinado NVIDIA Isaac Manipulator e Vention MachineMotion AI pode ser observada em cenários industriais de coleta aleatória de bin. Nesse contexto, o sistema integra percepção visual e planejamento de movimento para suportar o manuseio automatizado de objetos em ambientes não estruturados.
O processo começa com o FoundationPose, que interpreta a entrada RGB-D para estimar a posição e a orientação dos objetos dentro do bin. Esses dados são então utilizados pelo cuMotion, que calcula trajetórias otimizadas e sem colisões para o movimento do braço robótico. Esses planos de movimento são transmitidos através do controlador MachineMotion AI da Vention para o hardware robótico para execução. O resultado é um fluxo de trabalho coordenado que permite a apreensão e reposicionamento precisos de itens, atendendo às demandas da automação industrial em tempo real.
Esta configuração de sistema oferece uma solução robusta para tarefas que exigem um alto grau de variabilidade e adaptabilidade. Ao integrar percepção acelerada por GPU e planejamento de movimento em dispositivo, suporta automação de alto desempenho sem dependência de infraestrutura em nuvem.
O uso conjunto do NVIDIA Isaac Manipulator e do MachineMotion AI fornece várias vantagens operacionais. A responsividade em tempo real é alcançada por meio da aceleração de GPU em módulos NVIDIA Jetson, facilitando percepção e manipulação precisas mesmo em configurações dinâmicas. O sistema também é projetado para facilidade de implantação, com o MachineMotion AI reduzindo barreiras de integração e simplificando a implementação de capacidades robóticas avançadas. Além disso, sua conectividade celular integrada suporta monitoramento remoto do sistema, diagnósticos e atualizações, permitindo otimização contínua e reduzindo o tempo de inatividade potencial.
O post MachineMotion AI da Vention, alimentado pelo NVIDIA Isaac Manipulator, simplifica a implantação escalável de robôs impulsionados por IA apareceu primeiro no Metaverse Post.