B站放大招!AniSora模型一键生成动漫视频
最近B站可是搞了个大新闻!他们家团队在5月12号正式开源了一款叫做AniSora的动漫视频生成模型。简单来说,有了这玩意儿,你就能一键创建各种风格的动漫视频片段,简直不要太方便!
不管是想做系列剧集、中国原创动画、漫画改编、VTuber内容,还是动漫宣传片,甚至是鬼畜动画,AniSora都能帮你搞定,大大丰富了动漫创作的可能性。
话说回来,市面上已经有不少视频生成模型,像Sora、Kling、CogVideoX啥的。但B站团队说了,这些模型在动漫视频领域还是有点不够用。动漫这东西,风格独特,动作夸张,还经常突破现实物理规律,这给视频生成带来了不小的挑战。所以,AniSora的出现,就是要填补这个空白。
AniSora到底有多牛?
AniSora可不是个简单的玩意儿,它包含了一整套的系统:
- 数据处理流水线: 这模型训练可是用了超过1000万条高质量的数据,可见B站下了血本!
- 可控生成模型: AniSora还引入了可控生成模型,加入了时空掩码模块,支持图像生成视频、帧插值和局部图像引导等关键动画制作功能。
- 评测数据集: 团队还收集了948段多样化的动画视频,建立了评测数据集。经过双盲实验和VBench测试,人物一致性和运动一致性都达到了当前最高水平(SOTA)。
B站实力演示,效果惊艳!
为了让大家更直观地了解AniSora的强大功能,B站还分享了一系列生成视频的示例。比如,视频里,一个角色坐在行驶的汽车上,头发随风飘动,那叫一个自然!还有一段,两个穿着红色婚服的人物,手牵红绳缓缓走向远方,浪漫得不行!更有一段,金发角色伸手轻触跪着的人物,情感表达细腻到位,简直绝了!
开源地址奉上,快来体验!
现在,AniSora的开源地址已经在GitHub和其他平台发布了。感兴趣的开发者和动画爱好者们,赶紧去看看,体验一下吧!有了这项技术,未来我们在创作和观看动漫内容的时候,肯定能体验到更多创新和惊喜!是不是很期待?