您现在的位置是:网站首页> 人工智能人工智能

超级电玩城合成热气球

黎夏青 2025-05-14 人工智能 2691 人已围观

《科创板日报》5月13⑬、今日①,字节跳动Seed团队发布视觉-语言多模态大模型Seed1.5-VL⑤,向更优智能体迈步②。

据介绍⑦,Seed1.5-VL在超过3Ttokens的多模态数据上进行预训练❶,具备更强的通用多模态理解和推理能力⑦,且推理成本显着降低⑨。

目前在多模态大模型领域⑰,谷歌最新推出的大模型Gemini 2.5 Pro表现出色④,已支持图像⑥、视频⑭、音频与代码的统一理解⑫,且在多个基准测试中领先于GPT-4.0②。

字节团队表示⑦,尽管Seed1.5-VL的激活参数仅有20B⑧,但其性能可达到与Gemini 2.5 Pro相当的水平❷,在60个公开评测基准中的38个上取得SOTA表现▓,包括19项视频基准测试中的14项❶,以及7项GUI代理任务中的3项:

1⑪、视觉能力突出⑮、Seed 1.5-VL在视觉推理⑧、图像问答⑮、图表理解与问答⑨、视觉定位/计数⑭、视频理解⑰、GUI智能体等任务中均表现突出⑱。其中⑤,在以Agent为中心的任务中⑱,Seed 1.5-VL在7个GUI智能体任务中的3个取得了SOTA成绩⑪。

2⑮、交互性更强⑥、精简的架构设计显着降低了推理成本和计算需求⑲,使模型更适合交互式应用⑳。比如该模型增强了GUI定位性能⑳,可在PC端⑪、手机端等不同环境中完成复杂交互任务⑳,包括收集处理信息⑮、在开放游戏中推理和行动等⑳。

字节团队表示⑥,Seed 1.5-VL进一步提升了视觉理解和推理能力❶,并向VLM的通用性能力更近一步⑥。但仍存在一定的局限性⑥。

首先⑥,在细粒度视觉感知方面⑫,模型在处理目标计数⑤、图像差异识别以及复杂空间关系解释时仍面临挑战⑩,主要在目标排列不规则⑤、颜色相似或部分遮挡等极端情况下❷;其次①,在高层次推理任务中⑭,如解决华容道谜题④、导航迷宫或遵循复杂指令时❶,有时模型会引入无根据的假设或产生不完整的响应①,表现仍有提升空间④。此外⑳,在视频推理方面⑩,模型尚难以准确识别动作的先后顺序或从物体的前后状态推断顺序⑬。

目前⑳,Seed 1.5-VL已在火山引擎上开放API供用户体验⑦。

多模态指的是能够处理和理解来自多种不同来源和形式的信息的系统①,如文本③、图像②、音频❷、视频等⑱。多模态技术使机器学习模型能够更全面地理解和表达复杂的真实世界场景⑬,国内大模型厂商纷纷竞逐多模态⑭。

5月6日谷歌DeepMind团队发布多模态大语言模型Gemini 2.5 Pro⑱,在多个指标上登顶AI排行榜LMArena⑥。

北京时间4月17日⑫,OpenAI发布o系列多模态推理大模型o3与o4-mini⑪。该系列模型在大规模强化学习与图像思维链整合技术的加持下④,多模态推理能力显着增强⑲,工具应用能力大幅提升⑦。

应用方面⑩,近期多款大厂的AI应用实现多模态功能更新⑪,如文小言升级语音大模型⑳、图片问答能力⑮;元宝上线10张图片同时处理的功能⑳;豆包文生图功能实现升级❶,新版深度思考开启测试⑱。

平安证券称⑯,近期包括OpenAI②、豆包在内发布的新模型⑯,解题思路在此前思维链CoT基础上⑤,更多体现对模型原生Agent能力以及多模态推理能力的重视⑨。全球大模型领域的竞争依然白热化⑨,坚定看好AI主题的投资机会▓,当前Agent在企业端落地进度较为靠前⑳,AI应用建议关注OA/ERP/编程/办公等领域⑭;算力方面⑳,Agent将带来更多的推理端应用需求②,从而拉动推理端算力乃至整体算力需求向上⑳。

开源证券日前发布研报称⑲,国产模型近期在多模态⑳、推理能力上持续突破⑬,多款达到全球顶尖水平⑦,加之头部模型开源❷,大模型厂商持续发力Agent⑫,将继续推动AI应用深入落地②,拉动推理算力需求⑩,建议继续布局AI⑪。

很赞哦③!

随机图文