A NVIDIA apresentou novos detalhes do Lyra 2.0, um projeto de inteligência artificial desenvolvido pelo Spatial Intelligence Lab da empresa. A tecnologia consegue transformar uma única imagem em um ambiente virtual tridimensional, permitindo que o usuário controle a câmera e explore regiões que não aparecem originalmente na fotografia.

Diferentemente dos geradores tradicionais de imagens e vídeos, que produzem sequências visuais previamente determinadas, o Lyra 2.0 trabalha com trajetórias de câmera controladas pelo usuário. Conforme a exploração avança, o sistema gera novas partes do cenário e procura preservar a coerência do ambiente.

Como funciona o NVIDIA Lyra 2.0?

O funcionamento do Lyra 2.0 combina geração de vídeos por inteligência artificial com técnicas de reconstrução tridimensional. Inicialmente, o sistema recebe uma fotografia que serve como ponto de partida para a criação do ambiente.

A partir dela, a inteligência artificial gera sequências de vídeo considerando os movimentos de câmera definidos pelo usuário. Essas sequências são utilizadas posteriormente para reconstruir a geometria do cenário, permitindo visualizar o ambiente de diferentes perspectivas.

Um dos principais desafios desse processo é impedir que a inteligência artificial perca informações sobre locais já apresentados.

Para solucionar esse problema, a NVIDIA desenvolveu mecanismos que trabalham com dois obstáculos conhecidos na geração de ambientes por IA: o esquecimento espacial e a deriva temporal.

Memória espacial ajuda a manter os cenários consistentes

O esquecimento espacial acontece quando o modelo perde referências de regiões anteriormente geradas. Isso pode provocar alterações na arquitetura de construções, objetos e outros elementos quando o usuário retorna a um local já explorado.

Já a deriva temporal ocorre quando pequenos erros visuais e geométricos se acumulam durante a geração de sequências mais longas.

O Lyra 2.0 utiliza um sistema de memória espacial que recupera imagens anteriores com auxílio de informações geométricas tridimensionais. Dessa maneira, o modelo consegue consultar referências relevantes para reconstruir regiões já visitadas.

A NVIDIA também utiliza um treinamento baseado em resultados imperfeitos produzidos pelo próprio sistema. A intenção é ensinar o modelo a reconhecer e corrigir erros acumulados durante a geração, em vez de simplesmente reproduzi-los.

Ambientes 3D podem ser utilizados em jogos e simulações

Outro aspecto importante do projeto está na possibilidade de converter os ambientes gerados em representações tridimensionais utilizáveis por outras aplicações.

O sistema consegue reconstruir os cenários utilizando tecnologias como 3D Gaussian Splats e malhas poligonais. Essas representações permitem renderizar os ambientes de diferentes ângulos e integrá-los a ferramentas externas.

Um dos exemplos apresentados pela NVIDIA envolve o Isaac Sim, plataforma utilizada para simulação e desenvolvimento de sistemas robóticos.

Essa integração demonstra que o Lyra 2.0 não está limitado à criação de vídeos visualmente interessantes. Os ambientes produzidos também podem servir como espaços de simulação para robôs, permitindo testar navegação e interações em cenários virtuais.

Para a indústria de videogames, a tecnologia apresenta possibilidades interessantes. Desenvolvedores poderiam utilizar sistemas semelhantes para acelerar a criação de cenários, explorar conceitos de ambientação e produzir protótipos de ambientes tridimensionais.

Entretanto, isso não significa que a inteligência artificial já consiga criar jogos completos a partir de fotografias. Mecânicas, personagens, sistemas de colisão, missões e outros elementos ainda exigem desenvolvimento específico.

NVIDIA também trabalha para acelerar a geração

A velocidade de processamento é outro ponto importante do Lyra 2.0.

A NVIDIA desenvolveu uma versão otimizada que reduz o processo de geração de 35 etapas de remoção de ruído para apenas quatro etapas, utilizando uma técnica de destilação conhecida como DMD.

Essa otimização diminui consideravelmente o tempo necessário para produzir os segmentos de vídeo.

Apesar dos avanços, é importante diferenciar renderização em tempo real de geração em tempo real. Os ambientes reconstruídos podem ser renderizados em tempo real, mas a criação de novas partes do mundo por inteligência artificial continua exigindo processamento computacional significativo.

O projeto também apresenta limitações. Os resultados são direcionados principalmente a ambientes estáticos, enquanto cenários com movimentação complexa e elementos dinâmicos continuam representando desafios.

Projeto já está disponível no GitHub

O Lyra 2.0 não está restrito a uma demonstração fechada. A NVIDIA disponibilizou publicamente sua implementação, além de documentação, modelos e ferramentas relacionadas ao projeto.

O repositório oficial também recebeu atualizações com interface gráfica e código de treinamento em julho de 2026, ampliando as possibilidades de experimentação por pesquisadores e desenvolvedores.

Entretanto, existe uma diferença importante entre a disponibilidade do código e as condições de utilização dos modelos. Os pesos disponibilizados possuem condições próprias de licenciamento para uso em pesquisa, que precisam ser consultadas antes de qualquer aplicação comercial.

Conclusão

O NVIDIA Lyra 2.0 representa um avanço interessante na combinação entre geração de vídeos por inteligência artificial e reconstrução tridimensional. A possibilidade de transformar uma fotografia em um ambiente explorável, mantendo referências espaciais durante a navegação, pode contribuir para novas ferramentas de criação de cenários.

Para os desenvolvedores de jogos, o maior potencial está na possibilidade de acelerar etapas de prototipagem e produção de ambientes. Ainda existem limitações importantes, especialmente na geração de elementos dinâmicos e na criação de experiências completas.

Mesmo assim, o projeto mostra que a inteligência artificial está avançando além da produção de imagens e vídeos, aproximando-se de ferramentas capazes de construir espaços virtuais tridimensionais utilizáveis em aplicações reais.

Fontes

• NVIDIA Spatial Intelligence Lab: repositório oficial do Project Lyra no GitHub