Stability AI发布Stable Virtual Camera
Stability AI 推出了其最新的人工智能模型——Stable Virtual Camera,该模型能够将2D图像转换为 “沉浸式” 视频,并呈现出逼真的深度和视角。虚拟相机通常被广泛应用于数字电影制作和3D动画领域。借助于Stable Virtual Camera,Stability AI 希望将生成式AI的优势融入其中,从而为用户提供更大的控制和自定义空间。
Stable Virtual Camera 可以从单张或多张图像(最多可处理32张)中生成场景的 “新视角”,用户还可以指定相机角度。该模型可以生成沿着 “动态” 相机路径或预设路径移动的视频,包括 “螺旋”、“缩放”、“移动” 和 “平移” 等多种视觉效果。
当前版本的Stable Virtual Camera为研究预览版,可以生成方形(1:1)、竖屏(9:16)和横屏(16:9)三种宽高比的视频,时长最长可达1000帧。但是,Stability AI 提醒说,该模型在某些情况下可能会产生较低质量的视频结果,尤其是在处理包含人类、动物或 “动态纹理”(比如水面)的图像时。
Stability AI 在其官方博客中指出,“高度模糊的场景、复杂的相机路径交叉物体或表面,以及形状不规则的物体可能导致闪烁伪影,特别是在目标视角与输入图像差异很大的情况下。”
目前,Stable Virtual Camera 已在Hugging Face平台上以非商业许可的形式供研究人员使用,用户可以免费下载并体验。Stability AI是广受欢迎的图像生成模型Stable Diffusion的开发公司。虽然过去曾面临管理问题和财务困境,但Stability AI 在去年的投资者支持下获得了新一轮的融资,并积极致力于扭转不利局面。
近期,Stability AI 任命了新的首席执行官,并邀请知名电影导演詹姆斯・卡梅隆加入其董事会。此外,Stability AI 还发布了多款新型图像生成模型,并于今年3月与芯片制造商Arm达成合作,推出了一款能够生成音频和音效的AI模型,旨在将这些创新功能带入运行Arm芯片的移动设备中。
重点总结
- Stable Virtual Camera 可以将2D图像转换成沉浸式的视频,并且提供了多种相机路径选项。
- 当前模型是研究预览版本,在处理特定场景时可能会出现视频质量下降的问题。
- Stability AI 在经历管理危机之后,正在积极进行重组并发布新的产品,以此来改善公司的未来发展前景。
详情请查看《Stability AI》