O ritmo da inovação na geração de imagens de inteligência artificial é fenomenal. Uma empresa – Luma Labs – fornece um excelente exemplo de uso prático, mas extremamente divertido, da mais recente tecnologia aplicada a imagens 3D.
Conteúdo
- O que é Luma AI?
- Compatibilidade Luma AI com iPhone
- Como usar a IA Luma
- Melhorando o tempo todo
- Os altos e baixos da digitalização 3D
- Preço e disponibilidade do Luma AI
Luma IA está em teste beta no iPhone e eventualmente será disponibilizado em Android também. Entrei no grupo de teste beta e posso compartilhar algumas informações sobre o que esse aplicativo incrível faz e como é fácil obter resultados incríveis.
Vídeos recomendados
O que é Luma AI?
Luma AI é um aplicativo e serviço desenvolvido pela Luma Labs. Ele captura imagens tridimensionais usando uma técnica conhecida como Neural Radiance Fields (NeRF). É semelhante à técnica de traçado de raio que faz com que os gráficos em jogos de última geração pareçam tão realistas.
Relacionado
- Um iPhone acabou de ser vendido por uma quantia absurda em leilão
- Este telefone Android de US$ 600 tem uma grande vantagem sobre o iPhone
- Eu uso um iPhone há 14 anos. O Pixel Fold me fez querer parar
Os NeRFs já existem há alguns anos, mas existiam principalmente em instalações de pesquisa até muito recentemente. Com a explosão de Geração de imagens AI, encabeçada por renderizações fotorrealistas de Dall-E, os NeRFs estão começando a ser explorados por um público muito mais amplo. A primeira onda de novos softwares NeRF exigiu algumas habilidades de desenvolvedor e instalando pacotes de software do GitHub, em seguida, treinando o A.I. em um conjunto de fotos. Foi um pouco demais para a pessoa média.
A Luma Labs está prestes a tornar o processo dramaticamente mais simples com seu aplicativo Luma AI. Do início ao fim, todo o processo pode ser gerenciado a partir de um iPhone, e o resultado final também é mais acessível.
Compatibilidade Luma AI com iPhone
Como a Apple fez questão de demonstrar os recursos de medição de profundidade 3D dos sensores LiDAR, você pode esperar que a Luma AI exija o mais caro iPhone 14 Pro ou iPhone 14 Pro Máx. para capturar modelos 3D. No entanto, os desenvolvedores inteligentes do Luma Labs usam inteligência artificial. Isso torna esta tecnologia compatível com iPhones tão antigos quanto o iPhone 11.
Futuramente, o aplicativo estará disponível para Android e já existe uma versão web em teste beta também. Em uma entrevista, o CEO da Luma Labs, Amit Jain, disse que o aplicativo para iPhone deverá estar pronto para lançamento público em algumas semanas.
Como usar a IA Luma
Para usar o Luma AI, basta circular lentamente em torno de um objeto em três alturas diferentes. Uma sobreposição de AR orienta você durante o processo, que leva alguns minutos e se torna mais fácil após algumas tentativas à medida que você se familiariza com o processo. Em pouco tempo, você poderá capturar um objeto de tamanho médio, como uma cadeira, em alguns minutos.
Objetos de qualquer tamanho podem ser manipulados porque, para Luma AI, é apenas uma série de imagens – não importa o tamanho do assunto. Se você circular uma xícara, uma estátua ou um edifício, a ideia geral permanece a mesma.
O aplicativo avisará quando houver imagens suficientes e, quando isso acontecer, um botão Concluir aparecerá. Você também pode continuar circulando e preenchendo lacunas na nuvem AR de anéis e retângulos que representam as fotos tiradas até agora. O aplicativo interromperá automaticamente a captura quando uma quantidade ideal de fotos for coletada. Há também um modo de formato livre que permite capturar ainda mais fotos, em diferentes ângulos e distâncias. Você pode ver o processo no vídeo do YouTube que criei abaixo. É um aplicativo para iPhone, então é um vídeo de retrato.
Demonstração beta do Luma AI para tendências digitais
O processamento é a próxima etapa, que acontece nos servidores do Luma Labs. Depois de mais ou menos uma hora, o NeRF finalizado estará disponível no aplicativo em vários formatos diferentes. A primeira visualização fornecida é um vídeo gerado, mostrando um sobrevôo do objeto em seu ambiente natural. Uma versão interativa vem a seguir e permite girar a visualização arrastando um dedo ou mouse pela imagem.
O mais impressionante de tudo é que o tema da captura, extraído do fundo, também está disponível. Com esta representação, você pode girar o objeto 3D em qualquer eixo e ampliar para vê-lo mais de perto. A nitidez depende de quantas imagens foram coletadas e de quão lento e estável você foi durante o processo de captura.
Melhorando o tempo todo
Luma Labs está atualizando o aplicativo e o serviço em um ritmo notável. Uma semana após o recebimento do convite para o teste beta, foram adicionados dois novos recursos poderosos que expandem enormemente as possibilidades. A primeira é uma opção de upload na web que permite capturar vídeo sem o aplicativo e, em seguida, carregá-lo no site do Luma Labs para processamento. Os resultados aparecem online e no aplicativo.
Isso significa que é possível usar qualquer um dos modos de câmera do iPhone, capturar vídeo com uma câmera dedicada ou até mesmo gravar vídeo com óculos AR como Ray-Ban Stories. Por exemplo, um vídeo de drone torna-se ainda mais épico quando você pode suavizar o movimento e mudar de direção depois de já ter pousado. Luma Labs compartilhou um bom exemplo mostrando uma vista aérea das folhas de outono neste tweet.
O outono em Palo Alto é lindo! 🍂 https://t.co/EwNkiv0DQVpic.twitter.com/hdd7iBLYgV
-Luma AI (@LumaLabsAI) 22 de outubro de 2022
O outro novo recurso abre oportunidades de edição, pintura e impressão 3D. As malhas 3D podem ser exportadas com texturas em formato OBJ ou GLTF. Eles não são otimizados, mas podem ser visualizados com texturas intactas, mesmo com um visualizador on-line, como o site gratuito e de código aberto. Visualizador 3D on-line.
Também é possível abrir os arquivos 3D em um editor de malha como o gratuito e de código aberto Laboratório de malha para excluir quaisquer artefatos perdidos que aparecem como blobs flutuantes, bem como limpar e simplificar o modelo antes de exportá-lo em vários formatos. A estatueta apresentada acima tem cerca de sete centímetros de altura e foi esculpida por minha esposa, Tracey, para seu negócio, Um pequeno personagem. Luma AI capturou uma quantidade notável de detalhes na escultura e no tronco sobre o qual ela estava apoiada. O log também poderia ter sido selecionado e removido pelo MeshLab.
Os altos e baixos da digitalização 3D
Kyle Brussell compartilhou uma exibição de sobremesas de uma festa, mencionando que pediu aos adultos que esperassem por suas guloseimas para que ele pudesse capturá-las como um diorama digital.
Usado @LumaLabsAI em uma festa de aniversário ontem à noite, fiz um monte de adultos não comer sobremesa para que eu pudesse circular a mesa com meu telefone para fazer uma IA 3D sonhar com a configuração como uma pessoa muito legal pic.twitter.com/sP0vVPB3yx
-Kyle Russell (@kylebrussell) 30 de outubro de 2022
Embora o Luma AI possa processar vídeo, ele depende de imagens estáticas para construir uma cena tridimensional. Isso significa que se o assunto se mover, poderá reduzir a qualidade ou a clareza da captura. Uma imagem 3D de uma pessoa sentada, como mostra o tweet de Albert Bozesan, será boa. No mesmo tweet, a segunda captura de uma escultura mostra o que acontece quando há movimento na cena. O fundo mostra pessoas que caminharam perto do objeto como formas distorcidas.
Levou dois @LumaLabsAI#NeRFs perto de um lago da Baviera hoje. Ótima maneira de capturar memórias, parece Minority Report. #Tegernseepic.twitter.com/HLC0ekF7uD
-Albert Bozesan (@AlbertBozesan) 30 de outubro de 2022
Preço e disponibilidade do Luma AI
Luma AI está atualmente em teste beta e convites são feitos periodicamente por meio do site da empresa Twitter conta. Se você tiver um iPhone compatível e estiver interessado nesta tecnologia, poderá obter acesso antecipado. Também há uma lista de espera no Laboratórios Luma local na rede Internet.
O CEO da Luma Labs, Jain, indicou que o preço ainda não foi determinado e depende de quão ampla será a base de usuários e de como os resultados das varreduras estão sendo usados. Com base nessas afirmações, pode haver uma assinatura profissional com recursos mais avançados e uma assinatura pessoal por menos. Por enquanto, seu uso permanecerá gratuito.
Recomendações dos Editores
- A Apple pode enfrentar uma escassez ‘grave’ do iPhone 15 devido a problemas de produção, diz o relatório
- Ficarei furioso se o iPhone 15 Pro não tiver esse recurso
- Tentei substituir minha GoPro por este novo telefone e sua câmera inteligente
- Este pequeno gadget oferece o melhor recurso do iPhone 14 por US$ 149
- Espero que a Apple traga esse recurso Vision Pro para o iPhone
Atualize seu estilo de vidaDigital Trends ajuda os leitores a manter o controle sobre o mundo acelerado da tecnologia com as últimas notícias, análises divertidas de produtos, editoriais criteriosos e prévias únicas.
