Luma AI lança Ray2, gerador de vídeo com física aprimorada

A Luma AI causou alvoroço com o lançamento de sua plataforma de criação de vídeos generativos Dream Machine no verão passado.

É claro que, embora tenha sido há apenas sete meses, o espaço de vídeos com IA avançou rapidamente desde então, com o lançamento de muitos novos modelos de criação de vídeos com IA de startups rivais nos EUA e na China, incluindo Runway, Kling, Pika 2.0, Sora da OpenAI, Veo 2 do Google, Hailuo da MiniMax e alternativas de código aberto como Hotshot e Mochi 1 da Genmo, para citar apenas alguns. Até mesmo a Luma atualizou recentemente sua plataforma Dream Machine para incluir nova geração de imagens estáticas e quadros de brainstorming, além de lançar um aplicativo para iOS.

Mas as atualizações continuam: hoje, a startup com sede em São Francisco lançou o Ray2, seu mais novo modelo de geração de vídeos por IA, disponível agora através do site Dream Machine e aplicativos móveis para assinantes pagantes (por enquanto).

O modelo oferece “movimento e física coerentes e naturais de forma rápida”, de acordo com o co-fundador e CEO Amit Jain em sua conta no X, e foi treinado com 10 vezes mais recursos computacionais do que o modelo de vídeo original da Luma AI, o Ray1.

“Isso aumenta drasticamente a taxa de sucesso de gerações prontas para produção e torna a narrativa em vídeo acessível a muito mais pessoas,” acrescentou.

A plataforma Dream Machine da Luma na web oferece um nível gratuito com gerações de 720 pixels limitadas a um número variável a cada mês, enquanto os planos pagos começam em $6,99 por mês para o plano “Lite”, que oferece visuais em 1080p, e aumentam para Plus ($20,99/mês), Unlimited ($66,49/mês) e Enterprise ($1.672,92/ano).

Um grande avanço na geração de vídeos

Atualmente, o Ray2 é limitado à conversão de texto em vídeo, permitindo que os usuários digitem descrições que são transformadas em clipes de vídeo de 5 ou 10 segundos.

O modelo pode gerar novos vídeos em questão de segundos, embora no momento isso possa levar minutos devido a uma demanda intensa de novos usuários.

Exemplos compartilhados pela Luma e seus primeiros testadores em seu programa de Criadores mostram a versatilidade do modelo, incluindo um homem correndo em uma tempestade de neve na Antártida cercado por explosões, e uma bailarina dançando em uma placa de gelo no Ártico.

Impressionantemente, todos os movimentos nos vídeos de exemplo aparecem realistas e fluidos — e muitas vezes, com os sujeitos se movendo muito mais rápido e de forma mais natural do que os vídeos de geradores de IA rivais, que frequentemente parecem gerar em câmera lenta.

Ele pode até criar versões realistas de ideias surreais, como uma girafa surfando, como demonstrado pelo usuário do X @JeffSynthesized. “Ray 2 é realmente incrível,” ele escreveu no X.

Outros criadores de vídeos por IA que experimentaram o novo modelo parecem concordar em grande medida, com Jerrod Lew postando no X: “A cinematografia, iluminação e realismo aprimorados chegaram e é incrível.”

“É tão bom!” disse a artista de vídeos de IA Heather Cooper.

Meus próprios testes foram variados, com alguns prompts mais complexos gerando resultados não naturais e com falhas. Mas quando ele produziu clipes que se aproximavam mais do que eu tinha em mente em meus prompts —como espadachins cruzando espadas a bordo de uma estação espacial em órbita de Júpiter— foi inegavelmente impressionante.

Jain afirmou que a Luma também adicionará capacidades de imagem para vídeo, vídeo para vídeo e edição ao Ray2 no futuro, expandindo ainda mais as possibilidades criativas da ferramenta.

Para celebrar o lançamento do Ray2, a Luma Labs está realizando o The Ray2 Awards, oferecendo aos criadores a chance de ganhar até $7.000 em prêmios:

1. Prêmio de Grande Escala: O criador cujo conteúdo Ray2 conquistar mais visualizações em uma única plataforma durante a primeira semana de lançamento ganhará $5.000. As submissões devem ser enviadas até 22 de janeiro de 2025.
2. Sorteio de $3.000: Criadores podem entrar ao compartilhar conteúdo Ray2 nas redes sociais e interagindo com o vídeo de lançamento da Luma AI. O prazo para participação também é até 22 de janeiro de 2025.

Os vencedores de ambos os prêmios serão anunciados em 27 de janeiro de 2025. As submissões podem ser enviadas através de formulários fornecidos pela Luma Labs, e os criadores são incentivados a usar as hashtags #Ray2 e #DreamMachine ao compartilhar seu trabalho online.

Além disso, a Luma Labs lançou um programa de afiliados, permitindo que os participantes ganhem comissões promovendo suas ferramentas.