Pika lança o H3 Flex, IA de vídeo com pesos abertos que gera clipes com áudio mais rápido que o tempo real

Ferramentas de vídeo com IA aparecem toda semana, mas a novidade da Pika me chamou a atenção por um motivo bem prático para quem desenha ou anima: o novo Pika H3 Flex trabalha a partir de esboços e referências, e os pesos do modelo foram liberados para qualquer pessoa baixar.

O que o H3 Flex faz

Segundo o anúncio oficial publicado em 29 de outubro, o Flex é uma versão do modelo MiniMax H3 retreinada pela Pika para gerar vídeo em seis etapas em vez de cinquenta. Na prática, a empresa diz que um clipe de 15 segundos com áudio sincronizado, em 768p, pode sair em cerca de sete segundos de processamento do modelo (sem contar o restante do serviço).

Os destaques:

• até 12 referências por geração, misturando imagens, vídeos e áudio, como uma ficha de personagem, um cenário e um vídeo de movimento;
• quadros-chave desenhados à mão podem guiar a composição e a câmera;
• edição guiada por referência, para trocar roupa, objeto ou cenário mantendo a atuação;
• pela API, o áudio pode vir separado em cinco faixas: diálogo, trilha, efeitos, foley e ambiente;
• geração nativa em 480p ou 768p, com ampliação até 4K nos servidores da Pika.

Pesos abertos, com ressalvas

A Pika publicou o código de inferência e os adaptadores do gerador, que cobrem texto para vídeo, primeiro e último quadro e referências multimodais. A ampliação para alta resolução e a separação do áudio continuam sendo recursos hospedados pela empresa, e o uso segue os termos da licença do modelo.

Por que eu fico de olho

Para quem faz animação independente, poder testar ideias a partir de um storyboard é tentador, mas também reacende o debate sobre o lugar da IA no trabalho de animadores e dubladores. Por enquanto, o Flex está disponível pela API, e a Pika promete levá-lo ao seu aplicativo de criação em 2 de novembro.

Detalhes no anúncio oficial da Pika.