RadianceKit cria cenas 3D fotorrealistas no Mac com Gaussian splatting

O que é o RadianceKit

O RadianceKit é um aplicativo nativo para Mac que cria cenas 3D fotorrealistas a partir de fotos e vídeos usando a técnica 3D Gaussian Splatting. Todo o processamento é feito localmente no computador, com uso da GPU Apple Silicon via Metal, sendo apresentado como alternativa rápida aos fluxos baseados em nuvem, como NeRF e fotogrametria tradicionais.

O app concentra o fluxo completo em uma única ferramenta - importar, treinar, editar e exportar - sem necessidade de linha de comando, ambiente Python, ferramentas externas, conta ou conexão com a internet durante o processamento. As fotos e cenas nunca saem do dispositivo.

Requisitos e modos de uso

O RadianceKit exige um Mac com Apple Silicon (M1 ou mais recente, até M5) rodando macOS 26 Tahoe ou posterior, com 16 GB de RAM recomendados para treinar cenas maiores. Ele oferece dois modos: o Simple Mode guia o usuário passo a passo - importar fotos, pressionar iniciar e obter a cena 3D - enquanto o Expert Mode traz um layout de três painéis com navegador de projetos, viewport 3D interativo e inspetor completo com parâmetros de treinamento, curvas de perda em tempo real e opções de exportação.

Captura e importação

A posição das câmeras é calculada automaticamente pela Apple Photogrammetry; em seguida, o treinamento gera milhões de pequenos elipsoides 3D ("splats") que representam a cena, que pode ser explorada em tempo real de qualquer ângulo.

O app importa vídeos (.mp4, .mov, .m4v, .avi) e fotos (.jpg, .png, .heic, .tiff, .bmp), além de splats existentes (.ply, .spz e .splat) para visualização sem novo treinamento, e pacotes de cena da câmera do iPhone.

Há também suporte nativo a conteúdo 360°: equiretangular, 360° estéreo (topo/base e lado a lado), cubemap, equi-angular cubemap (formato do YouTube), fisheye 180/200° e panoramas parciais, em foto ou vídeo. A projeção é detectada pelos metadados do arquivo e pode ser ajustada manualmente quando os metadados foram removidos. Cada quadro é desdobrado em vistas perspectives sobrepostas antes do alinhamento e treinamento.

A fonte aponta dois limites: uma única foto 360° não basta para gerar uma cena 3D, pois a profundidade exige várias posições de câmera - é preciso gravar um vídeo percorrendo o local ou fotografar de vários pontos. E contêineres brutos dual-fisheye (.insv, .insp, .360, .lrv) precisam ser primeiro costurados e exportados como equiretangular .jpg ou .mp4 em apps como Insta360 Studio, GoPro Player ou o app da Ricoh Theta. Câmeras de 5.7K ou 8K são recomendadas, já que cada vista de 90° usa apenas uma fatia da resolução original.

Novidade anunciada: o RadianceCap para iPhone captura fotos, poses de câmera, óptica precisa e profundidade via LiDAR; a cena depois é processada no Mac com o RadianceKit.

Edição e exportação

O editor gaussiano interativo permite selecionar e apagar regiões diretamente no viewport 3D, removendo artefatos flutuantes ou partes indesejadas com um pincel, com opção de desfazer.

As cenas podem ser exportadas em seis formatos: PLY, Compressed PLY, SPZ, glTF, .splat e SOG. O app também gera vídeos orbitais e visualizadores web interativos autocontidos, compartilháveis sem software adicional.

Preço

O download é gratuito, com teste de 3 dias de todas as funções. Depois disso, a versão completa é desbloqueada com compra única dentro do app de US$ 7,99 - sem assinatura nem taxas de upgrade. Os preços variam por região (8,99 € na zona do euro, por exemplo). O app é de Björn Kindler e está disponível na Mac App Store.