华盖资本完成8亿元医疗早期募资
06-18
1月26日，阿里云公布了多模态大模型的研究进展。
通义千要求视觉理解模型Qwen-VL再次升级。
继Plus版本之后，Max版本再次推出。
升级后的模型具有更强的视觉推理能力和中文理解能力。
它可以根据图片识别人、回答问题、创建、编写代码，并且在多项权威评测中取得了优异的成绩，可与OpenAI的GPT-4V和谷歌的Gemini Ultra相媲美。
LLM（大语言模型）之后，大模型领域的下一个热点是什么？多模态是目前最共识的方向。
过去六个月，OpenAI、谷歌等纷纷推出多模态模型。
阿里云还在今年8月发布并开源了具有图像和文本理解能力的Qwen-VL模型。
Qwen-VL取得了远远超过同期同规模一般模特的成绩。
表现。
视觉是多模态能力中最重要的模态。
作为人类感知和认识世界的第一感官，视觉传递的信息占“五感”信息的80%。
通义千问LLM视觉语言模型是在通义千问LLM的基础上开发的。
通过将视觉表征学习模型与LLM对接，赋予AI理解视觉信息的能力，在大语言模型的“头脑”中打开一扇视觉“窗口”。
与Qwen-VL相比，Qwen-VL-Plus和Qwen-VL-Max具有更强的视觉推理和中文理解能力，整体性能与GPT-4V和Gemini Ultra相当。
在MMMU、MathVista等评测中远远超越业界所有开源模型，在文档分析（DocVQA）、中文图像相关（MM-Bench-CN）等任务上超越GPT-4V，达到全球最佳水平。
基础能力方面，升级后的模型能够准确描述和识别图片信息，并基于图片进行信息推理和拓展创作；它具有视觉定位功能，还可以对图片的指定区域进行问答。
在视觉推理方面，Qwen-VL-Plus和Qwen-VL-Max可以理解流程图等复杂形式的图片，并可以分析复杂的图标。
看图答题、看图作文、看图写代码都没问题。
在看图、做题的图像文字处理方面，Qwen-VL升级版Qwen-VL的中英文文字识别能力得到了显着提升。
它支持百万像素以上的高清分辨率图像和极端宽高比的图像，并且可以充分再现表示密集的文本并从表格和文档中提取信息。
Qwen-VL-Max 再现了密集的文本。
与LLM相比，多模态大模型具有更大的应用想象空间。
例如，一些研究人员正在探索大型多模态模型与自动驾驶场景的结合，寻找“完全自动驾驶”的新技术路径；将多模态模型部署到手机、机器人、智能音箱等端侧设备上，让智能设备自动理解来自物理世界的信息；或者基于多模态模型开发应用，辅助视障人士日常生活等。
目前，Qwen-VL-Plus 和 Qwen-VL-Max 限时免费。
用户可以在通义千文官网和通义千文APP直接体验Max版模型的能力，也可以通过阿里云灵机平台（DashScope）调用模型API。
雷锋网（公众号：雷锋网）雷锋网版权文章未经授权禁止转载。
详情请参见转载说明。
版权声明：本文内容由互联网用户自发贡献，本站不拥有所有权，不承担相关法律责任。如果发现本站有涉嫌抄袭的内容，欢迎发送邮件 举报，并提供相关证据，一经查实，本站将立刻删除涉嫌侵权内容。
标签：
相关文章
06-18
06-18
06-18
06-18
06-18
最新文章
三只松鼠：门店扩张已全面暂停
Nvidia 已准备好“统治”AI
【创业24小时】2023年11月16日
【创业24小时】2022年10月20日
倒计时一天，浙江这座小镇要火了！
沃图网络获数千万A轮投资，加大投入海外网红营销SaaS平台建设
泰山天使基金部分退出拉手半年回报180倍
西格数据完成1000万元A+轮融资，国发创投领投