A Luma AI, com sede na Califórnia, visa democratizar as cenas 3D. Após o lançamento de uma ferramenta de conversão de texto em 3D, a startup introduziu uma API para converter imagens e vídeos em modelos 3D.
Atualmente, leva entre $ 60 e $ 1.500 e de duas a dez semanas para criar um modelo 3D, diz a startup de IA Luma AI. Ela quer tornar o processo muito mais rápido e barato, reduzindo para 30 minutos e custando apenas $ 1 por modelo.
Para isso, a empresa, que levantou recentemente $ 20 milhões em uma rodada de financiamento da Série A, revelou uma API de vídeo para 3D. “Nossa missão é democratizar o 3D. Qualidade de Hollywood, 3D foto realista para todos”, diz a startup com sede em Palo Alto, Califórnia, que tem 14 funcionários.
Vivemos em um mundo tridimensional. Nossa percepção e memórias são de seres tridimensionais. No entanto, não há como capturar e revisitar esses momentos como se você estivesse lá. Tudo o que temos para mostrar são essas fatias 2D que chamamos de fotos. É hora disso mudar.
Luma AI
Para criar um modelo 3D a partir de um conjunto de imagens ou vídeos, os desenvolvedores podem usar a nova API, mas os usuários finais também podem acessar um interface web. Para obter o melhor resultado possível, a Luma fornece algumas orientações.
Dicas da Luma AI para criar a cena 3D perfeita
A cena ou objeto deve ser fotografado andando em círculo, o mais devagar possível para evitar desfoque e com o modo HDR desligado.
É melhor fotografar de três alturas diferentes: na altura do peito olhando para frente, acima da cabeça olhando ligeiramente para baixo no centro da cena e, finalmente, na altura do joelho olhando ligeiramente para cima. Opcionalmente, a cena pode ser filmada em grande angular ou olho de peixe (ultra grande angular). Você precisará especificar isso ao fazer o upload.
O tamanho máximo do arquivo de vídeo que você pode enviar é de 5 GB. O mesmo se aplica a um arquivo zip de imagens. Veja o Documentação Luma AI Para maiores informações. A partir do vídeo ou das imagens, Luma cria um NeRF, uma cena 3D aprendida neuralmente.
Em meu breve teste, a função de vídeo para 3D do Luma provou ser utilizável, embora o objeto central tenha uma resolução um pouco baixa. Mas o buquê de flores no vidro transparente também é um objeto relativamente complexo. Tiros adicionais provavelmente melhorariam a qualidade.
Após o processamento no servidor, a cena 3D também pode ser baixada como um objeto (GLTF, EUADZ, OBJ) ou cena de malha (PLY), compartilhada por link ou incorporada como um iframe. Este é um exemplo de cadeira para mostrar como isso pode funcionar com um objeto simples.
Comece com alguns créditos gratuitos
Para usar a nova ferramenta 3D, você precisa se registrar gratuitamente. Dez créditos – equivalentes a dez cenas 3D – estão disponíveis para teste. A Luma AI promete melhorias na qualidade e no tempo de processamento em um futuro próximo.
Em dezembro de 2022, Luma AI lançou uma interface de texto para 3D chamada Imagine 3D com resultados igualmente impressionantes. Atualmente, esta ferramenta está disponível apenas por meio de uma lista de espera.