• 首页
  • AI工具集
  • AI资讯
  • AI活动
  • AI社区
  • AI短剧
  • AI创作大赛
  • AI小说
  • AI绘画
    AI视频
    AI对口型
    视频转动漫风格
    AI创意二维码
    AI艺术字
    AI智能抠图
  • AI短视频创作热门-AI社区
AI 对话

字节跳动放大招!开源多模态模型BAGEL,图像编辑能力惊艳!

字节跳动放大招!开源多模态模型BAGEL,图像编辑能力惊艳!
AI TOP100
2025-05-21 15:40:27

AI圈又炸了!字节跳动开源BAGEL多模态模型,图像处理能力杠杠的!

最近,AI圈儿又热闹了,字节跳动憋了个大招,直接开源了一款叫做BAGEL的多模态基础模型。这玩意儿厉害了,虽然只有70亿个活跃参数,但整体参数量达到了140亿!别看参数不多,效果那是相当给力,在各种多模态理解测试中,直接把Qwen2.5-VL和InternVL-2.5这些开源大佬给干趴下了。

BAGEL多模态模型

图像生成、编辑一把抓,BAGEL实力不容小觑

更牛的是,BAGEL在图像生成方面的表现,竟然能和专业的SD3相媲美。这还不算完,在经典的图像编辑场景里,它的效果也远超许多领先的开源模型。简单来说,以后想P图,用BAGEL就能搞定,而且效果绝对让你惊艳!

BAGEL多模态模型

BAGEL背后的秘密:混合Transformer专家架构(MoT)

BAGEL之所以这么厉害,得益于它采用了一种叫做混合变换器专家(MoT)的架构。这种架构能最大限度地提升模型学习各种多模态信息的能力。它用了两个独立的编码器,一个用来捕捉图像的像素级特征,另一个用来捕捉图像的语义级特征。整个模型框架遵循 “下一个标记组预测” 的套路,训练的时候就盯着预测下一个语言或视觉标记,目的就是为了压缩信息。

海量数据喂养,成就BAGEL的强大能力

为了训练BAGEL,字节跳动可是下了血本,用了来自语言、图像、视频和网络数据的数万亿个多模态标记进行预训练。经过持续训练和监督微调,BAGEL在各种标准测试中都超过了其他开源模型,展示了它在多模态方面的强大能力,比如自由形式图像编辑、预测未来帧、进行三维操作和世界导航等等。

持续训练,能力不断进化

研究人员发现,随着BAGEL的预训练不断深入,它在理解、生成和编辑任务中的表现也在不断提升。而且,不同的能力会在训练的不同阶段出现,比如多模态理解和生成能力在早期就展现出来了,而更复杂的智能编辑能力则在后期才慢慢显现。

研究还表明,将变分自编码器(VAE)和视觉变换器(ViT)的特征结合起来,能显著提升智能编辑能力,这也强调了视觉 - 语义上下文在复杂多模态推理中的重要性。

总而言之,字节跳动这次开源的BAGEL,绝对是AI圈的一颗重磅炸弹,它不仅性能强悍,而且还具备了强大的图像处理能力,未来可期!

项目地址:https://huggingface.co/ByteDance-Seed/BAGEL-7B-MoT

想了解更多AI创作软件工具请关注AI人工智能网站--AITOP100平台--AI工具集

0
0
文章来源:AI TOP100
免责声明:本文不代表本平台立场,且不构成投资建议,请谨慎对待。
相关资讯
  • 智源开源RoboBrain 2.0与RoboOS 2.0:具身智能迎来“双核驱动”新时代

  • 影视级TTS新星登场!IndexTTS2:零样本克隆+情绪控制,重塑配音新体验

  • Perplexity CEO点赞Kimi K2模型,AI领域合作新信号引关注

  • Mistral AI新品Devstral2507:为开发者量身打造的代码神器

  • NVIDIA发布DiffusionRenderer AI模型,实现视频到可编辑逼真3D的飞跃。

热点资讯

夸克AI助力高考志愿填报,4000万考生家长的靠谱之选

6天前
夸克AI助力高考志愿填报,4000万考生家长的靠谱之选

豆包AI重磅更新:六大核心功能全面升级,开启智能办公新纪元

7天前
豆包AI重磅更新:六大核心功能全面升级,开启智能办公新纪元

AI助手市场洗牌:DeepSeek流量腰斩,KIMI陷入沉默期,夸克异军突起用户规模突破2亿

5天前
AI助手市场洗牌:DeepSeek流量腰斩,KIMI陷入沉默期,夸克异军突起用户规模突破2亿

Grok 4即将发布:马斯克xAI最新AI模型全面解析

6天前
Grok 4即将发布:马斯克xAI最新AI模型全面解析

AIGC大赛:北京动画周48小时AIGC原创动画挑战赛,邀您共赴创意盛宴!

4天前
AIGC大赛:北京动画周48小时AIGC原创动画挑战赛,邀您共赴创意盛宴!
分享
0
0

欢迎来到AI Top100!我们聚合全球500+款AI智能软件,提供最新资讯、热门课程和活动。我们致力于打造最专业的信息平台,让您轻松了解全球AI领域动态,并为您提供优质服务。

合作伙伴
联系我们
加入AITOP100社群
加入社群
AITOP100商务微信
商务微信
相关链接
服务及隐私政策
网站地图
关于我们
粤ICP备2022124843号-2粤公网安备44030002004505广播电视节目制作经营许可证:(粤)字第00712号Copyright © 华强方特(深圳)动漫有限公司 版权所有