中国电商网 > 国内> 正文

阿里云开源通义千问多模态视觉模型Qwen-VL，号称“远超同等规模通用模

2023-08-28 15:39来源：IT之家阅读量：7159

，阿里云今日推出了大规模视觉语言模型 Qwen-VL，目前已经在 ModeScope 开源，IT之家早前曾报道，阿里云此前已经开源通义千问 70 亿参数通用模型 Qwen-7B 和对话模型 Qwen-7B-Chat。

据悉，Qwen-VL 是一款支持中英文等多种语言的视觉语言模型，相较于此前的 VL 模型，其除了具备基本的图文识别、描述、问答及对话能力之外，还新增了视觉定位、图像中文字理解等能力。

图源 ArXiv 论文

Qwen-VL 以 Qwen-7B 为基座语言模型，在模型架构上引入视觉编码器，使得模型支持视觉信号输入，该模型支持的图像输入分辨率为 448，此前开源的 LVLM 模型通常仅支持 224 分辨率。

官方表示，该模型可用于知识问答、图像标题生成、图像问答、文档问答、细粒度视觉定位等场景，在主流的多模态任务评测和多模态聊天能力评测中，取得了远超同等规模通用模型的表现。

图源modelscope

此外，在 Qwen-VL 的基础上，通义千问团队使用对齐机制，打造了基于 LLM 的视觉 AI 助手 Qwen-VL-Chat，可让开发者快速搭建具备多模态能力的对话应用。

通义千问团队同时表示，为了测试模型的多模态对话能力，他们构建了一套基于 GPT-4 打分机制的测试集 “试金石”，对 Qwen-VL-Chat 及其他模型进行对比测试，Qwen-VL-Chat 在中英文的对齐评测中均取得了开源 LVLM 最好结果。

图源modelscope

广告声明:文内含有的对外跳转链接，用于传递更多信息，节省甄选时间，结果仅供参考，IT之家所有文章均包含本声明。

郑重声明：此文内容为本网站转载企业宣传资讯，目的在于传播更多信息，与本站立场无关。仅供读者参考，并请自行核实相关内容。

责任编辑：顾晓芸

最新阅读

“深交所·创享荟”打造资本市场服务国企改革新典范

9月27日，深交所举办第九期“创享荟”国企专业化整合专场活动。“创享荟”是深交所着力打造的具有深市特色的市场服务品牌，目前已围绕热点主题举办了多期专场活动，影响力和吸引力不断增强。深交所相关负...
微软在GitHub上线开发工具包，助力开发者使用Rust语言编写Wind

，微软Azure首席技术官MarkRussinovich日前在X平台发文，公开微软最近宣布“扩大采用Rust语言的成果”，微软同时还在GitHub中发布了一系列开发工具包，让开发者可以使用Rust语言...
擦亮“金融为民”底色光大银行多维发力谱写“人民金融”新篇章

像这样面向听障人士的手语服务模式，光大银行已持续运行了四年。四年来，光大银行通过收集听障客群金融业务需求及沟通痛点，让金融服务更贴近听障人士的日常生活。而这，只是光大银行践行“金融为民”初心，努力提供...
云南信托联合多家金融机构进乡村开展金融知识普及教育

近日，为帮助广大农村群众进一步提升金融素养及金融风险防范意识，助力打造诚信、健康、安全、和谐的金融环境，在云南省农村信用社联合社、昆明市农村信用社联合社及昆明市西山区农村信用合作联社的共同协调组织下，...
“领头羊”计划走进广州番禺，超59家企业具备上市潜力

南方财经全媒体记者翁榕涛实习生曾日丽广州报道 9月26日下午，广州企业上市“领头羊”行动计划“番禺行动”启动仪式在番禺节能科技园交流中心举行。据南方财经全媒体记者了解，今年7月以来，广州市地方金...
算力牛股中际旭创股价“反攻”800G能否助三季度业绩惯性增长？

21世纪经济报道记者雷晨实习生原婷婷北京报道近期受国内外AI利好消息驱动，二级市场上，中际旭创股价重新抬头，9月26日、9月27日连续上涨。截至9月27日收盘，公司股价报收于114.07元/股，收...
索尼申请外置小型触摸屏专利，可“架在”PS5手柄上远程游玩游戏

，据外媒gamerant报道，索尼近日注册了一项新专利，从文件内容上来看，这项专利主要显示，外加可以使用一个“触摸屏”连接DualSense手柄，来游玩PS5游戏。图源索尼索尼于此前正式公布了...
14幅图看懂债市潮起潮落

超越城乡居民储蓄存款规模和A股总市值，拥有百万亿以上体量的债券。如同资产配置中的“米面粮油”，在投资中无处不在。相较于股票，您可能是更加委婉地参与其中，大部分人是通过银行理财、债券基金、保险、资管计划...
国庆黄金周运输今日启动，长三角铁路预计发送超250万人次

国庆黄金周运输启动。 9月27日，澎湃新闻记者从中国铁路上海局集团有限公司获悉，今天是铁路国庆黄金周运输首日，长三角铁路预计发送旅客逾250万人次，较2019年同期多发送60余万人次，增幅超三成。 ...
阿里拟分拆菜鸟在港上市菜鸟子公司已申请上百项物流专利

9月26日，阿里巴巴港交所公告，拟通过以菜鸟股份于香港联交所主板独立上市的方式分拆菜鸟。拟议分拆完成后，阿里巴巴将继续持有菜鸟50%以上的股份，菜鸟将仍为其子公司。天眼查App显示，菜鸟网络科技有...