• 首页
  • AI工具集
  • AI资讯
  • AI活动
  • AI社区
  • AI短剧
  • AI创作大赛
  • AI小说
  • AI绘画
    AI视频
    AI对口型
    视频转动漫风格
    AI创意二维码
    AI艺术字
    AI智能抠图
  • AI短视频创作热门-AI社区
AI 对话

全球首发-Vidu推出主体参照功能,AI视频生成迈入新阶段

全球首发-Vidu推出主体参照功能,AI视频生成迈入新阶段
AI TOP100
2024-09-11 19:18:09

全球首发-Vidu推出主体参照,AI视频生成迈入新阶段

AITOP100平台获悉,9月11日下午,生数科技联合清华大学研发的视频大模型Vidu迎来重大更新,全球首发“主体参照”(Subject Consistency)功能,标志着视频生成技术进入一个全新阶段,AI视频人物一致性就这样被VIDU解决了!

Vidu视频大模型崭露头角

自4月底全球发布以来,Vidu视频大模型凭借其快速推理、精确语义理解、高动态性和极致动漫风格等优势,在7月底正式上线并全面开放使用,迅速成为全球视频大模型领域的佼佼者。

全球首创“主体参照”功能,实现任意主体一致性生成

9月11日,生数科技举办媒体开放日活动,正式推出“主体参照”功能。

所谓“主体参照”技术就是用户上传一张任意主体的图片,Vidu便能精确锁定该主体形象,并允许通过文字描述来变换场景,从而生成视频中主体形象保持一致的作品。这一功能不仅限于单一对象,而是适用于各类主体,包括人物、动物、商品,甚至是动漫角色和虚构形象,确保了视频生成过程中的高度一致性和可控性。Vidu作为全球首个具备此能力的视频大模型,能够确保无论是真实人物还是虚构角色,在多样化的环境和镜头转换中,其形象都能保持连贯统一。

在视频大模型领域,虽然“图生视频”和“角色一致性”等技术已有所发展,但Vidu的“主体参照”功能在保持一致性方面取得了重大突破。

以下是三项技术的对比分析:

(1)图生视频(Image to Video)技术:这种技术依赖于首帧画面的连续生成,无法直接创造目标场景,从而限制了视频内容的丰富性和场景的灵活性。

(2)角色一致性(Character to Video)技术:这种技术主要关注于人物面部特征的一致性,但在保持人物整体形象稳定方面存在挑战。

(3)主体参照(Subject Consistency)技术:Vidu的这项技术不仅限于人物,而是适用于任意主体。在处理人物主体时,用户可以选择保持面部一致,或是保持人物整体形象的高度一致,并通过输入文字描述来灵活地生成目标场景。

以科比的角色为例,使用Vidu的“主体参照”功能,输入“在现代餐厅喝茶”的描述,我们可以清晰地看到,科比的形象在现代场景中得到了精确保留,视频输出的场景既自然又真实。

科比照片

上传科比照片,使用Vidu推出的主体参照功能

改变视频创作“游戏规则”,提升创作效率

在视频大模型领域,虽然新模型不断涌现,但普遍存在一个问题:难以保持视频内容的一致性。这在对特定角色或物体进行视频创作时尤为明显,因为它们的形象需要在整个视频中保持连贯。现有模型在这方面表现不佳,尤其是在复杂动作和交互场景中,主体形象容易崩溃。此外,视频输出的随机性和对细节如镜头、光影效果的掌控不精确,限制了创作完整视频内容的能力。传统AI视频制作方法繁琐且缺乏创意。

Vidu的“主体参照”功能颠覆了这一现状。它简化了流程,允许用户上传主体图片并输入场景描述,直接生成视频素材,极大地减少了工作量,并解放了创作者的想象力。这一技术革新不仅提升了视频创作的自由度,还开辟了新的创新空间。

Vidu的“主体参照”功能颠覆了这一现状。它简化了流程,允许用户上传主体图片并输入场景描述,直接生成视频素材,极大地减少了工作量,并解放了创作者的想象力。这一技术革新不仅提升了视频创作的自由度,还开辟了新的创新空间。

支持多样角色类型

Vidu的最新功能扩展了对角色类型的支持,不仅包括真人,还涵盖了2D动画角色和3D建模角色。这一创新技术极大地丰富了创作工具箱,使得电影制作人、游戏开发者以及广告创意专家能够在多样化的项目中进行角色的一致性管理和场景转换,确保角色在各个场景和时间线中的连贯性和真实感。

Vidu推出主体参照功能-支持多样角色类型

Vidu推出主体参照功能-支持多样角色类型2

应用场景广泛

Vidu的“主体参照”视频生成技术为艺术创作和商业广告领域带来了革命性的进步。它不仅能够满足艺术家对于创作高度个性化艺术作品的需求,同时也能满足商业广告在高效制作上的要求,为这两个领域提供了前所未有的技术支持和创作自由。无论是追求独特视觉体验的艺术项目,还是需要快速响应市场的商业宣传,VIDU的技术都能助力创作者实现他们的创意愿景。

“主体参照”功能指引文档

为了便于用户掌握和使用VIDU的“主体参照”视频生成功能,我们精心准备了详细的功能指南。用户可通过以下链接查阅和下载该指南,全面了解如何运用VIDU进行视频创作,以及相关技巧。

指南链接:https://pkocx4o26p.feishu.cn/docx/Mb77dt8VxoskqvxgFiMcfwwsnNe?from=from_copylink。

Vidu AI视频工具官网:【点击登录】

“主体参照”功能的上线,标志着AI视频创作迈向更高效、更灵活的阶段。生数科技表示,将继续探索精确控制多主体交互、风格统一、多变场景稳定切换等复杂元素,以满足更高层次的叙事需求。未来,视频创作行业将因AI技术的颠覆性变革而焕发新生。

想了解更多AI创作软件工具请关注AI人工智能网站--AITOP100平台--AI工具集

0
0
免责声明:本文不代表本平台立场,且不构成投资建议,请谨慎对待。
全部评论
暂无评论
相关AI工具
  • Vidu AI中国站
相关资讯
  • 腾讯元宝深度整合腾讯视频:一键搜索直达,观影体验全面升级

  • AI峰会:探索Agent应用新趋势,共话AI技术发展新未来

  • 实测:我让AI点了杯咖啡,还叫了车!全球首个手机通用Agent-AutoGLM 2.0到底多聪明?

  • 技术硬核!快手自研Klear-Reasoner模型登顶,数学推理准确率突破90%大关

  • 《黑神话·钟馗》预告片震撼发布,AI视频制作技术如何重塑游戏宣传新时代

热点资讯

DeepSeek V3.1正式发布:128K上下文窗口重新定义AI模型能力边界

2天前
DeepSeek V3.1正式发布:128K上下文窗口重新定义AI模型能力边界

AITOP100 AI应用重磅更新!Veo3、即梦AI 3.0、Vidu Q1、海螺AI、Luma全新升级

1天前
AITOP100 AI应用重磅更新!Veo3、即梦AI 3.0、Vidu Q1、海螺AI、Luma全新升级

字节跳动Seedance Pro上线Higgsfield:无限免费生成,30多种电影级预设

8天前
字节跳动Seedance Pro上线Higgsfield:无限免费生成,30多种电影级预设

DeepSeek V3.1全面技术解读:从架构到应用的系统性评估与对比分析

2天前
DeepSeek V3.1全面技术解读:从架构到应用的系统性评估与对比分析

DeepSeek V3.1:128K上下文只是"配菜",V3+R1模型融合才是重点!

1天前
DeepSeek V3.1:128K上下文只是"配菜",V3+R1模型融合才是重点!
分享
0
0

欢迎来到AI Top100!我们聚合全球500+款AI智能软件,提供最新资讯、热门课程和活动。我们致力于打造最专业的信息平台,让您轻松了解全球AI领域动态,并为您提供优质服务。

合作伙伴
联系我们
加入AITOP100社群
加入社群
AITOP100商务微信
商务微信
相关链接
服务及隐私政策
网站地图
关于我们
粤ICP备2022124843号-2粤公网安备44030002004505广播电视节目制作经营许可证:(粤)字第00712号Copyright © 华强方特(深圳)动漫有限公司 版权所有