Motor WorldRover gera dados sintéticos de vídeo anotados
O pipeline no Unreal Engine produz longas explorações com profundidade, trajetórias de câmera e sinais de ação.
Por que importa
Modelos de mundo e sistemas interativos de vídeo precisam de dados de treinamento que vão além de RGB, incluindo geometria, movimento e sinais de controle. O WorldRover mira essa lacuna com anotações sintéticas alinhadas que são difíceis de obter em escala a partir de capturas do mundo real.
Pontos-chave
- 1.O WorldRover renderiza rotas na escala de minutos em ambientes criados por artistas.
- 2.As sequências combinam RGB com profundidade, trajetórias de câmera e sinais de ação.
- 3.As explorações podem ser reproduzidas em diferentes pontos de vista e estados ambientais.
Pesquisadores apresentaram o WorldRover, um motor de dados sintéticos de vídeo para gerar explorações ricamente anotadas de ambientes criados por artistas. Seu pipeline no Unreal Engine renderiza offline rotas na escala de minutos, preservando trajetórias completas e a geometria da cena, e consegue reproduzir a mesma exploração a partir de câmeras em primeira pessoa, terceira pessoa e panorâmicas em 360 graus sob diferentes estados ambientais. A equipe usou o sistema para criar o WorldRover-10M, combinando vídeo RGB com profundidade métrica, trajetórias de câmera e sinais de ação derivados da trajetória.
⚡ Experimente hoje
Avalie o WorldRover-10M antes de criar datasets de modelos de mundo em vídeo que exijam profundidade, trajetórias ou rótulos de ação.
Fontes e reportagens originais
Este resumo sintetiza e linka a cobertura dos veículos abaixo.
Gostou deste resumo? Receba o próximo no seu e-mail.
Mais em Produtos
Robin Williams’ Instagram account brought back to fight ‘AI abuse’
Robin Williams' children are taking over their father's Instagram account after his daughter spoke out against the use of his AI likeness, as reported earlier b
IBM testa quanta memória agentes de IA precisam
Estudo ALTK-Evolve mostra que ganhos com memória em agentes dependem da capacidade do modelo e da estratégia de entrega.
Warp apresenta o Warp Factories para desenvolvimento com IA
O sistema foi criado para simplificar a construção de fábricas de software com IA.