• 首页
  • AI工具集
  • AI资讯
  • AI活动
  • AI社区
  • AI短剧
  • AI创作大赛
  • AI小说
  • AI绘画
    AI视频
    AI对口型
    视频转动漫风格
    AI创意二维码
    AI艺术字
    AI智能抠图
  • AI短视频创作热门-AI社区
AI 对话

革新AI视频生成:Stability AI推出开源神器Stable Video Diffusion

革新AI视频生成:Stability AI推出开源神器Stable Video Diffusion
AI TOP100
2023-11-24 21:15:32

Stable Video Diffusion,Stability AI最新推出的AI视频生成技术,标志着生成AI技术的重大进步,能够轻松地将静态图像转换为动态视频。以下是结合互联网最新消息的详细报道:

Stable Video Diffusion简介

  • 基础模型:Stable Video Diffusion作为Stability AI的首个生成视频的基础模型,于2023年11月21日发布,基于其成功的图像模型Stable Diffusion。这一发布被视为Stability AI向着为各类用户群体开发可访问模型这一目标迈出的重要一步​

开源和商业可用性

  • 广泛可用性:在AI领域中独树一帜,Stable Video Diffusion是少数同时提供开源和商业版本的视频生成模型之一。这种双重可用性使其在市场中占据独特位置,满足广泛用户和应用需求​​​
  • 创新举措:Stability AI发布Stable Video Diffusion,使公司成为少数提供面向公众和商业用途的开源AI视频生成模型的提供者之一。这一步骤凸显了公司的创新精神和致力于普及AI技术的决心​
  • 技术优势和市场影响

    • 超越竞争对手:在用户偏好研究中,Stable Video Diffusion据报道在性能上超过了其商业竞争对手RunwayML和Pika Labs,根据Stability AI提供的基准测试。这表明其在AI生成视频内容领域的强势市场地位和潜在主导性​

    发布生成式视频模型Stable Video Diffusion(SVD) 。

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    Stability AI官方博客显示,全新SVD支持文本到视频、图像到视频生成:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    并且还支持物体从单一视角到多视角的转化,也就是3D合成:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    根据外部评估,官方宣称SVD甚至比runway和Pika的视频生成AI更受用户欢迎。

    虽然目前只发布了基础模型,但官方透露“正计划继续扩展,建立类似于Stable Diffusion的生态系统”。

    目前论文代码权重已上线。

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    最近视频生成领域不断出现新玩法,这次轮到Stable Diffusion下场,以至于网友们的第一反应就是“快”,进步太快!

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    但仅从Demo效果来说,更多网友们表示并没有感到很惊喜。

    虽然我喜欢SD,而且这些Demo也很棒……但也存在一些缺陷,光影不对、而且整体不连贯(视频帧与帧之间闪烁)。

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    总归来说这是个开始,网友对SVD的3D合成功能还满是看好:

    我敢打赌,很快就会有更好的东西出来,到时候只要描述一下,就会得到一个完整的3D场景。

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    SD视频官方版来袭

    除了上面展示的,官方还发布了更多Demo,先来看一波:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    太空漫步也安排上:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    背景不动,只让两只鸟动也可以:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    SVD的研究论文目前也已发布,据介绍SVD基于Stable Diffusion 2.1,用约6亿个样本的视频数据集预训练了基础模型。

    可轻松适应各种下游任务,包括通过对多视图数据集进行微调从单个图像进行多视图合成。

    微调后,官方公布的是两种图像到视频模型,可以以每秒3到30帧之间的自定义帧速率生成14(SVD)和25帧(SVD-XT)的视频:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    之后又微调了多视角视频生成模型,叫做SVD-MV:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    根据测试结果,在GSO数据集上,SVD-MV得分优于多视角生成模型Zero123、Zero123XL、SyncDreamer:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    值得一提的是,Stability AI表示SVD目前仅限于研究,不适用于实际或商业应用。SVD目前也不是所有人都可以使用,但已开放用户候补名单注册。

    视频生成大爆发

    最近视频生成领域呈现出一种“混战”的局面。

    前有PikaLabs开发的文生视频AI:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    后又有号称“史上最强大的视频生成AIMoonvalley推出:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    最近Gen-2的 “运动笔刷” 功能也正式上线,指哪画哪:

    这不现在SVD又出现了,又有要卷3D视频生成的可能。

    image.png

    但文本到3D生成方面好像还没有太多进展,网友对这一现象也很是困惑。

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    有人认为数据是阻碍发展的瓶颈:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    还有网友表示原因在于强化学习还不够强:

    Stable Video Diffusion问世!3D合成功能引关注,网友:进步太快

    家人们对这方面的最新进展有了解吗?欢迎评论区分享~

    总结

    Stability AI的Stable Video Diffusion代表了AI视频生成领域的一项重要进步。其将静态图像转换为视频的能力,加上开源和商业的可用性,使其成为该领域的一项开创性工具。其在用户偏好研究中超过竞争对手的报道进一步突显了其在快速发展的AI领域中的潜在影响力和吸引力。

    这一新型AI模型有望彻底改变我们对视频内容的认知和创造方式,为创作者、开发者和企业等提供激动人心的可能性。随着AI技术领域的不断演进,像Stable Video Diffusion这样的工具正在树立新的标准,并为各个行业的创新应用打开大门。

    0
    0
    文章来源:AI TOP100
    免责声明:本文不代表本平台立场,且不构成投资建议,请谨慎对待。
    全部评论
    暂无评论
    相关资讯
    • 细思极恐!Meta竟然用色情片训练AI,背后隐藏的人性黑洞让人不寒而栗

    • 每日AI资讯-2025年08月22日

    • AutoClip:开源免费AI视频剪辑工具完全使用指南 - 自动化视频处理的革命性解决方案

    • Kimi K2 Turbo再突破!输出速度飙至每秒100 Tokens,效率翻倍还享5折优惠

    • ToonComposer:AI动画制作工具完全指南 - 从草图到专业动画的智能转换

    热点资讯

    即梦AI智能多帧功能上线:10张图生成54秒超长镜头,视频创作门槛大降!

    1天前
    即梦AI智能多帧功能上线:10张图生成54秒超长镜头,视频创作门槛大降!

    DeepSeek V3.1正式发布:128K上下文窗口重新定义AI模型能力边界

    4天前
    DeepSeek V3.1正式发布:128K上下文窗口重新定义AI模型能力边界

    可灵2.1首尾帧功能炸场!影视级转场+复杂运镜,一键解锁创作自由!

    1天前
    可灵2.1首尾帧功能炸场!影视级转场+复杂运镜,一键解锁创作自由!

    AITOP100 AI应用重磅更新!Veo3、即梦AI 3.0、Vidu Q1、海螺AI、Luma全新升级

    3天前
    AITOP100 AI应用重磅更新!Veo3、即梦AI 3.0、Vidu Q1、海螺AI、Luma全新升级

    DeepSeek V3.1全面技术解读:从架构到应用的系统性评估与对比分析

    4天前
    DeepSeek V3.1全面技术解读:从架构到应用的系统性评估与对比分析
    分享
    0
    0

    欢迎来到AI Top100!我们聚合全球500+款AI智能软件,提供最新资讯、热门课程和活动。我们致力于打造最专业的信息平台,让您轻松了解全球AI领域动态,并为您提供优质服务。

    合作伙伴
    联系我们
    加入AITOP100社群
    加入社群
    AITOP100商务微信
    商务微信
    相关链接
    服务及隐私政策
    网站地图
    关于我们
    粤ICP备2022124843号-2粤公网安备44030002004505广播电视节目制作经营许可证:(粤)字第00712号Copyright © 华强方特(深圳)动漫有限公司 版权所有