Luma lança novo modelo de IA que permite aos usuários gerar vídeos a partir de frames iniciais e finais

Luma, uma empresa de vídeo AI e modelos 3D apoiada pela a16z, novo modelo A ferramenta, chamada Ray3 Modify, permite aos usuários modificar a filmagem existente, fornecendo uma imagem de referência de personagem que mantém o desempenho da filmagem original. Os usuários também podem fornecer quadros iniciais e finais para orientar o modelo na geração de imagens de transição.

A empresa anunciou quinta-feira que seu modelo Ray3 Modify resolve o problema de manter o desempenho humano ao usar IA para editar ou gerar efeitos para estúdios criativos. A startup disse que o modelo segue melhor as imagens de entrada, permitindo que os estúdios usem atores humanos para filmagens criativas ou de marca. Luma disse que o novo modelo mantém os movimentos, o tempo, o olhar e as expressões emocionais originais dos atores durante a mudança de cena.

Ray3 Modify permite aos usuários fornecer uma referência de personagem para transformar na filmagem original e transformar a aparência de um ator humano nesse personagem. Essa referência também permite que os criadores retenham informações como figurinos, aparência e identidade durante a filmagem.

Além disso, os usuários também podem fornecer quadros de referência inicial e final para criar vídeos usando o novo modelo Ray3 Modify. Isso ajuda os criadores a direcionar as transições e controlar o movimento e o comportamento dos personagens, mantendo a continuidade entre as cenas.

“Os modelos de vídeo gerados podem ser muito expressivos, mas também podem ser difíceis de controlar. Hoje, estamos entusiasmados em apresentar o Ray3 Modify, que combina o poder expressivo do mundo real e da IA ​​com controle criativo total. Isso significa que as equipes criativas podem capturar uma performance na câmera, modificá-la instantaneamente em qualquer lugar imaginável, mudar de roupa ou até mesmo voltar e refilmar a cena na IA sem recriar a filmagem física.” disse Amit Jain, cofundador e CEO da Luma AI. declaração.

Luma disse que o novo modelo será disponibilizado aos usuários por meio da plataforma Dream Machine da empresa. A empresa concorre com empresas como Runway e Kling. Função de correção de vídeo Em junho de 2025.

A liberação do modelo está na parte de trás Nova rodada de financiamento de US$ 900 milhõesliderada pela empresa de IA Humain, de propriedade do Fundo de Investimento Público da Arábia Saudita, para a startup anunciada em novembro. Investidores existentes, incluindo a16z, Amplify Partners e Matrix Partners, também participaram da rodada. A startup também planeja construir um cluster de IA de 2GW na Arábia Saudita com Humain.