Câmera de profundidade do RealSense D555. | Crédito: RealSense
O RealSense, recém -independente depois de sair da Intel no mês passado, está aprofundando seus laços com a Nvidia. Realsense disse O relatório do robô Agora está sendo muito mais público sobre sua colaboração com a Nvidia – algo que era essencialmente impossível enquanto parte da Intel, dada a natureza competitiva dos dois gigantes semicondutores.
Nadav Orbach, CEO da RealSense, disse O relatório do robô No mês passado, uma das limitações de estar dentro da Intel foi a capacidade de parceria com certas empresas. Talvez este seja um que ele estava aludindo.
A parceria se concentra em torno do novo Câmera de profundidade do RealSense D555 e as plataformas de robótica da Nvidia, incluindo o novo Jetson Thor. O D555 estreia o processador de visão V5 da empresa com poder no chip sobre Ethernet (POE), obturador global, IMU integrado e suporte nativo do ROS 2. O D555 também permite o streaming direto para Holoscan, da Nvidia Para fusão de sensores de latência ultra baixa e computação em tempo real.
Chris Mathieu, do RealSense, disse que esses recursos aumentarão ainda mais a prevenção de obstáculos, a interação humana -robô segura e a navegação para robôs móveis autônomos (AMRs) e humanóides.
No lado da computação, a integração aproveita a Nvidia Jetson Thor, que é alimentada pela arquitetura da GPU de Blackwell e oferece até 2070 teraflops de desempenho de IA dentro de um envelope de 130W. Comparado com o Jetson Orin, a Nvidia disse que o Jetson Thor fornece 7,5x de computação de IA mais alta e uma melhor eficiência energética de 3.5x, permitindo que os desenvolvedores de robótica executem modelos generativos de IA generativos em larga escala e dutos de percepção avançada na borda.
Realsense disse que a colaboração oferece três benefícios principais para os desenvolvedores:
- Simulação aprimorada para implantação: Dados de profundidade nativa Streaming para NVIDIA Isaac Sim acelera a transição do protótipo para a produção
- Arquiteturas de sistema validadas: Oleodutos otimizados em Jetson Thor garantem o máximo desempenho para aplicativos de robótica do mundo real
- Fusão de sensores em tempo real: A integração com a ponte sensor de Holoscan desbloqueia a percepção ultra-baixa-latência crítica para os robôs que trabalham ao lado de humanos
“Essa iniciativa cimenta o papel da Realsense como a plataforma de percepção de escolha para AMRs e humanóides”, disse Orbach. “Ao fornecer otimizações de integração e desempenho nativos com a ponte do sensor Nvidia Thor e Holoscan, estamos acelerando a adoção convencional da IA física.
Chris Matthieu, vice -presidente do ecossistema do desenvolvedor do RealSense, disse que a demanda inicial pelo D555 é forte. Ele disse O relatório do robô A empresa vendeu rapidamente a primeira produção da D555. Ele disse que novas remessas são esperadas em meados de setembro. De acordo com Matthieu, os engenheiros que testaram o sistema destacaram a latência quase zero da câmera à GPU de Jetson, permitindo que os robôs pensem e reagam mais rápido que o olho humano-até 90 quadros por segundo, em comparação com um estimado de 50 a 60 fps na visão humana.
Matthieu observou que esse desempenho poderia se traduzir em AMRs mais seguros que podem navegar por armazéns lotados, humanóides capazes de colaboração em tempo real com pessoas e maior taxa de transferência em ambientes de logística e fabricação. “A percepção mais rápida e a tomada de decisão mais rápida pode significar que os robôs não apenas funcionam com mais segurança, mas também superam os seres humanos por fatores de 2 a 3x de produtividade”, disse ele.
A RealSense disse que sua parceria com a NVIDIA é uma etapa crítica para escalar robôs em aplicativos do mundo real. “Este é apenas o começo”, disse Matthieu. “O que vem a seguir vai explodir nossas mentes.”