A plataforma Stable Diffusion, uma das mais populares em modelos de linguagem a partir de inteligência artificial que produzem ilustrações, anunciou uma evolução. A partir de agora, ela é capaz também de criar vídeos.
Apresentada nessa terça-feira (21), a novidade da Stability se chama Stable Video Diffusion e é o primeiro modelo generativo de clipes animados da companhia, baseado nas ferramentas já existentes e com resultados que parecem impressionantes.
Veja abaixo uma prévia do que o modelo de vídeo da Stable Video Diffusion é capaz de fazer:
Segundo a Stability, a ideia é que essa tecnologia seja usada em campos como publicidade, educação e entretenimento, entre vários outros setores.
Como funciona a IA de vídeos da Stable Diffusion
A IA generativa de vídeos da empresa é capaz de criar, em poucos segundos, animações em duas ou três dimensões a partir de comandos de texto do usuário. Ela segue a mesma lógica de outros serviços parecidos, trazendo resultados mais complexos e precisos de acordo com a quantidade de detalhes no prompt.
Ela utiliza as mesmas bases técnicas do criador de imagens estáticas para gerar ilustrações, gerando um conteúdo em movimento entre 14 e 25 frames diferentes com uma taxa de movimento de até 30 quadros por segundo.
Para além de entradas em texto, ela também é capaz de transformar imagens estáticas em animações, ou seja, "dar vida" para fotos ou desenhos.
- Leia também: Os 10 melhores aplicativos de relacionamento de 2024
A transformação de um comando de texto para vídeos compostos por diferentes quadros feitos por IA.
Segundo a Stability, a IA generativa foi treinada com "milhões de vídeos coletados da internet" e refinada com uma amostragem menor de cerca de um milhão de clipes. A presença ou não de materiais protegidos por direitos autorais nesse conjunto, entretanto, não foi totalmente explicada pela companhia.
- Leia também: DeepSeek: veja como usar a nova IA chinesa gratuita
Além disso, ainda há limitações na criação em termos de enquadramento, efeitos de câmera, duração e representação de rostos humanos, ao menos por enquanto.
Como usar a IA de vídeo do Stable Diffusion?
Por enquanto, o Stable Video Diffusion está liberado apenas em uma versão prévia para pesquisadores da área. Quem está disposto a utilizar a plataforma atualmente precisa assinar um termo de comprometimento com as regras da ferramenta, incluindo não representar pessoas reais nas criações.
O código foi disponibilizado no repositório GitHub e mais detalhes técnicos podem ser lidos no estudo acadêmico publicado pela equipe (em inglês).