Desafiando a OpenAI, Meta anuncia novo modelo de IA para geração de vídeo com som

O Movie Gen também pode gerar música de fundo e efeitos sonoros sincronizados com o conteúdo dos vídeos, disse a Meta em um comunicado, e usar a ferramenta para editar vídeos existentes.

Em um desses vídeos, a Meta fez com que a ferramenta inserisse pompons nas mãos de um homem que corria sozinho no deserto, enquanto em outro ela modificou um estacionamento onde um homem andava de skate, de um terreno seco para um coberto por uma poça de água.

Os vídeos criados pelo Movie Gen podem ter até 16 segundos de duração, enquanto o áudio pode ter até 45 segundos, informou a Meta. A empresa compartilhou dados de testes cegos que indicam que o modelo tem um desempenho favorável em comparação a ofertas de startups como Runway, OpenAI, ElevenLabs e Kling.

O anúncio foi feito em um momento em que Hollywood discute como utilizar a tecnologia de vídeo de IA generativa, após a OpenAI, apoiada pela Microsoft, mostrar pela primeira vez em fevereiro como seu produto Sora pode criar vídeos semelhantes a filmes em resposta a solicitações de texto.

Tecnólogos do setor de entretenimento estão ansiosos para usar essas ferramentas para aprimorar e agilizar a produção de filmes, enquanto outros se preocupam com a adoção de sistemas que parecem ter sido treinados em obras protegidas por direitos autorais, sem permissão.

Parlamentares também destacaram preocupações sobre o uso de falsificações geradas por IA, ou deepfakes, em eleições em todo o mundo, inclusive em EUA, Paquistão, Índia e Indonésia.

Os porta-vozes da Meta disseram ser improvável que a empresa libere o Movie Gen para uso aberto por desenvolvedores, como fez com sua série Llama de modelos de linguagem grande, dizendo que considera os riscos individualmente para cada modelo. Eles se recusaram a comentar a avaliação da Meta para o Movie Gen especificamente.

Em vez disso, disseram que a Meta está trabalhando diretamente com a comunidade do entretenimento e outros criadores de conteúdo nos usos do Movie Gen e o incorporará aos próprios produtos da Meta em algum momento do próximo ano.

De acordo com a postagem no blog e um artigo de pesquisa sobre a ferramenta lançado pela Meta, a empresa usou uma combinação de conjuntos de dados licenciados e publicamente disponíveis para criar o Movie Gen.

A OpenAI tem se reunido com executivos e agentes de Hollywood neste ano para discutir possíveis parcerias envolvendo a Sora, embora ainda não tenha sido relatado nenhum acordo resultante dessas conversas. As preocupações com a abordagem da empresa aumentaram em maio, quando a atriz Scarlett Johansson acusou o fabricante do ChatGPT de imitar sua voz sem permissão para seu o chatbot.

A Lions Gate Entertainment, empresa por trás de "Jogos Vorazes" e "Crepúsculo", anunciou em setembro que estava dando à startup de IA Runway acesso à sua biblioteca de filmes e televisão para treinar um modelo de IA. Em troca, segundo a empresa, o estúdio e seus cineastas poderão usar o modelo para aprimorar seu trabalho.

(Reportagem de Katie Paul em Nova York, reportagem adicional de Dawn Chmielewski em Los Angeles)