Stable Video 3D | IA cria vídeo 3D a partir de imagem 2D
Referência em modelos de IA para criar imagens e vídeos, a Stability AI lançou o Stable Video 3D, modelo voltado para converter simples imagens em 2D em vídeos tridimensionais. A novidade promete ver a mesma figura a partir de perspectivas diferentes sem distorções e com resultados precisos.
De acordo com a empresa, o novo modelo supera outras alternativas de código aberto no segmento de tecnologia
3D e vídeos orbitais, como o Zero123-XL e o antecessor Stable Zero123.
Em nota, a Stability afirma que o Stable Video 3D “consegue entregar visualizações coerentes de qualquer ângulo com generalização proficiente” e “garante a aparição consistente dos objetos em várias visualizações, melhorando aspectos críticos de gerações 3D realistas e precisas”. Além disso, a ferramenta usa um modelo de iluminação desembaraçado, criado para resolver os problemas causados pelo brilho e otimizá-lo com as texturas e o formato do objeto.
–
Podcast Porta 101
: a equipe do Canaltech discute quinzenalmente assuntos relevantes, curiosos, e muitas vezes polêmicos, relacionados ao mundo da tecnologia, internet e inovação. Não deixe de acompanhar.
–
Today, we are releasing Stable Video 3D, a generative model based on Stable Video Diffusion. This new model advances the field of 3D technology, delivering greatly improved quality and multi-view.
The model is available now for commercial and non-commercial use with a Stability… pic.twitter.com/cc5T9RRH3L
— Stability AI (@StabilityAI) March 18, 2024
O modelo é dividido em duas variantes: SV3D_u e SV3D_p. A primeira opção gera os objetos orbitais, mas só permite vê-los a partir de um ângulo de câmera fixo, enquanto a segunda garante que o resultado seja visto a partir de qualquer direção ou ângulo.
A diferença para outras plataformas está na forma de conversão: o Video 3D não usa prompts em texto, por exemplo, e apenas transforma a imagem original. Para criar objetos a partir de texto, a alternativa é usar o Stable 3D
, da mesma empresa.
Disponibilidade
O Stable Video 3D pode ser usado gratuitamente de forma não comercial e a documentação foi liberada no Hugging Face. Para usos comerciais, é necessário assinar um plano pago de membro da Stability AI, disponível a partir de US$ 20 por mês (cerca de R$ 100 em conversão direta).
Com a novidade, a Stability deixa o seu portfólio ainda mais diverso no segmento de IA — vale lembrar que a companhia também possui ferramentas para criar músicas ou sons
e transformar imagens em vídeo
.
Leia a matéria no Canaltech
.
Trending no Canaltech: