稳定AI的新AI模型将照片变成3D场景
稳定性AI发布了新的AI模型稳定的虚拟摄像头,该公司声称可以将2D图像转换为具有逼真的深度和透视图的“沉浸式”视频。
虚拟摄像头是数字胶片制作和3D动画中经常使用的工具,可实时捕获和浏览场景。该公司在博客文章中说,使用稳定的虚拟摄像头,稳定性试图将生成性AI添加到组合中,以提供更大的控制和自定义性。
稳定的虚拟摄像机以用户指定的相机角度从一个或多个图像(总计32个)产生场景的“新视图”。该模型可以生成沿“动态”相机路径或预设的视频,包括“螺旋”,“ Dolly Zoom”,“ Move”和“ Pan”。
图像信用:稳定性AI当前版本的稳定虚拟摄像机是一项研究预览,可以在广场上生成视频(1:1),肖像(9:16)和景观(16:9)长宽比最高1,000帧。稳定性警告该模型可能会在某些情况下产生较低质量的结果,但是,特别是使用人类,动物或“动态纹理”(如水)的图像。
“高度模棱两可的场景,相交对象或表面的复杂相机路径以及不规则形状的对象可能会导致闪烁的伪影,”稳定性在其博客文章中指出,“尤其是当目标观点与输入图像显着不同时。”
> >稳定的虚拟摄像头可在非商业许可下进行研究。它可以从AI Dev平台拥抱面下载。
稳定性是受欢迎的图像产生模型稳定扩散背后的陷入困境的公司,去年筹集了新的现金,包括埃里克·施密特(Eric Schmidt)和纳普斯特(Napster)创始人肖恩·帕克(Sean Parker)在内的投资者试图改变业务。据报道稳定不当,使财务毁灭,导致员工辞职,与Canva建立合作伙伴关系,投资者不断担心公司的前景。
在过去的几个月中,稳定性聘请了新的首席执行官,任命“泰坦尼克号”导演詹姆斯·卡梅伦(James Cameron)担任董事会,并发布了几种新的图像生成模型。 3月初,该公司与Chipmaker Arm合作,带来了一个可以产生音频的AI模型,包括向运行ARM芯片的移动设备进行声音效果。
发布评论