A Nvidia divulgou publicamente o código de sua estrutura inovadora, Neuralangelo, para criar modelos 3D de ultra-alta definição a partir de videoclipes comuns.
Agora disponível no GitHub, a ferramenta permite que os usuários peguem um videoclipe de alta qualidade e o convertam em um modelo 3D, que pode ser usado no desenvolvimento de jogos, efeitos de filmes, arquitetura, engenharia ou até metaversos inteiros.
O site de pesquisa da Nvidia estados a estrutura Neuralangelo “facilita a criação de gêmeos digitais detalhados de cenas do mundo real centradas em objetos e em grande escala com a ajuda de dispositivos móveis onipresentes”.
A vídeo pela equipe de pesquisa da Nvidia explicou que Neuralangelo usa grades de hash 3D multi-resolução e renderização de superfície para criar modelos 3D detalhados. Esses métodos melhoram o processo de criação usando gradientes numéricos e técnicas de otimização de grosso a fino, particularmente úteis ao modelar áreas grandes e suaves. Sem essas técnicas, essas áreas geralmente aparecem com muito ruído e lacunas no modelo.
No estudo, Neuralangelo demonstrou usar efetivamente capturas de vídeo RGB para criar modelos 3D detalhados, incluindo modelos grandes do parque da sede da Nvidia e da Universidade Johns Hopkins.
A filmagem usa um drone de consumo para voar pelo parque Nvidia, que é então convertido em um modelo 3D com superfícies altamente detalhadas.
Além disso, Neuralangelo tem um bom desempenho no benchmark DTU, um teste padrão neste campo, verificando que ele pode fazer modelos 3D detalhados enquanto mantém superfícies lisas intactas. Angel Investor Javi Lopez elogiou Neuralangelo no X, citando Arthur C Clarke, “Qualquer tecnologia suficientemente avançada é indistinguível da magia.”
Comparado ao método anterior da Nvidia chamado Instant NeRF, o Neuralangelo é uma melhoria significativa. Ele cria modelos 3D mais suaves usando gradientes numéricos para trabalhar na operação de suavização e controlando a quantidade de detalhes em diferentes estágios do processo de modelagem.
De uma perspectiva mais ampla, o lançamento do Neuralangelo é um avanço significativo no campo da modelagem 3D em geral, potencialmente revolucionando e democratizando os aplicativos em videogames, cinema, ambientes virtuais e muito mais.
Ao fornecer um meio confiável e eficiente para alcançar a reconstrução de superfície 3D de alta fidelidade, Neuralangelo ressalta a evolução contínua da tecnologia em preencher a lacuna entre um ‘metaverso’ virtual e o mundo real.
o posto Transforme imagens de drones em metaversos 3D enquanto a Nvidia lança nova ferramenta de IA apareceu primeiro em CryptoSlate.
