Estabilidade O novo modelo de IA da IA ​​transforma fotos em cenas 3D

A estabilidade da IA ​​lançou um novo modelo de IA, câmera virtual estável, que a empresa afirma que pode transformar imagens 2D em vídeos “imersivos” com profundidade e perspectiva realistas.

As câmeras virtuais são ferramentas frequentemente usadas em cinema digital e animação em 3D para capturar e navegar cenas em tempo real. Com a câmera virtual estável, a estabilidade procurou adicionar IA generativa à mistura para proporcionar maior controle e personalização, disse a empresa em um Postagem do blog.

A câmera virtual estável gera “vistas novas” de uma cena de uma ou mais imagens (até 32 no total) nos ângulos da câmera que um usuário especifica. O modelo pode gerar vídeos que viajam por caminhos da câmera “dinâmicos”, incluindo predefinições como “Spiral”, “Dolly Zoom”, “Move” e “Pan”.

A iteração atual da câmera virtual estável, uma visualização de pesquisa, pode gerar vídeos em proporções quadradas (1: 1), retrato (9:16) e paisagem (16: 9) de até 1.000 quadros de comprimento. A estabilidade alerta que o modelo pode produzir resultados de menor qualidade em certos cenários, particularmente com imagens com seres humanos, animais ou “texturas dinâmicas” (por exemplo, água ondulante).

“Cenas altamente ambíguas, caminhos complexos da câmera que cruzam objetos ou superfícies e objetos de formato irregular podem causar artefatos tremeluzentes”, observa a estabilidade no post do blog, “especialmente quando os pontos de vista de destino diferem significativamente das imagens de entrada”.

A câmera virtual estável está disponível para uso em pesquisa sob uma licença não comercial. O modelo está disponível para download da plataforma AI dev abracho.

Estabilidade, a empresa sitiada por trás do popular modelo de geração de imagens Difusão estávelAssim, Chegou novo dinheiro no ano passado Como investidores, incluindo Eric Schmidt e o fundador da Napster, Sean Parker, procurou mudar os negócios. Emad Mostaque, co-fundador e ex-CEO da Stability, supostamente estabilidade mal administrada em ruína financeira, levando a equipe a renunciar, uma parceria com o Canva a cair e os investidores a se preocuparem com as perspectivas da empresa.

Nos últimos meses, a estabilidade contratou um novo CEO, nomeou o diretor Titanic James Cameron para seu conselho de administração e lançou vários novos modelos de geração de imagens. No início de março, a empresa Juntou -se ao braço do fabricante de chips Trazer um modelo de IA que pode gerar áudio, incluindo efeitos sonoros para dispositivos móveis executando chips de braço.