元象首个多模态大模型 XVERSE-V 开源,刷新权威大模型榜单,支持任意宽高比输入 多模态人工智能大模型是什么 元象大模型
admin
2024-04-28 17:06:34
0


人类获取的信息83%来自视觉,图文多模态大模型能感知更丰富和精确的真实世界信息,构建更全面的认知智能,从而向AGI(通用人工智能)迈出更大步伐。

元象今日发布多模态大模型 XVERSE-V ,支持任意宽高比图像输入,在主流评测中效果领先。该模型全开源,无条件免费商用,持续推动海量中小企业、研究者和开发者的研发和应用创新。

XVERSE-V 性能优异,在多项权威多模态评测中超过零一万物Yi-VL-34B、面壁智能OmniLMM-12B及深度求索DeepSeek-VL-7B等开源模型,在综合能力测评MMBench中超过了谷歌GeminiProVision、阿里Qwen-VL-Plus和Claude-3V Sonnet等知名闭源模型。


图. 多模态大模型综合评测

1
融合整体和局部的高清图像表示

传统的多模态模型的图像表示只有整体,XVERSE-V 创新性地采用了融合整体和局部的策略,支持输入任意宽高比的图像。兼顾全局的概览信息和局部的细节信息,能够识别和分析图像中的细微特征,看的更清楚,理解的更准确。



注:Concate* 表示按列进行拼接

这样的处理方式使模型可以应用于广泛的领域,包括全景图识别、卫星图像、古文物扫描分析等。

示例- 高清全景图识别 、图片细节文字识别



免费下载大模型

Hugging Face:https://huggingface.co/xverse/XVERSE-V-13B

ModelScope魔搭:https://modelscope.cn/models/xverse/XVERSE-V-13B

Github:https://github.com/xverse-ai/XVERSE-V-13B

问询发送:opensource@xverse.cn

微信添加:lixing_lixing

元象持续打造国内开源标杆,在国内最早开源最大参数65B 、全球最早开源最长上下文256K 以及 国际前沿的MoE模型, 并在SuperCLUE测评全国领跑。此次推出MoE模型, 填补国产开源空白,更将其 推向了国际领先水 平。

商业应用上,元象大模型是 广东最早获得国家备案的模型之一 ,可向全社会提供服务。元象大模型去年起已和多个腾讯产品,包括QQ音乐 、虎牙直播、全民K歌、腾讯云等,进行深度合作与应用探索,为文化、娱乐、旅游、金融领域打造创新领先的用户体验。


2
多方向实际应用表现突出

模型不仅在基础能力上表现出色,在实际的应用场景中也有着出色的表现。具备不同场景下的理解能力,能够处理信息图、文献、现实场景、数理题目、科学文献、代码转化等不同需求。

图表理解

不论是复杂图文结合的信息图理解,还是单一图表的分析与计算,模型都能够自如应对。



视障真实场景

在真实视障场景测试集VizWiz中,XVERSE-V 表现出色,超过了InternVL-Chat-V1.5、DeepSeek-VL-7B 等几乎所有主流的开源多模态大模型。该测试集包含了来自真实视障用户提出的超过31,000个视觉问答,能准确反映用户的真实需求与琐碎细小的问题,帮助视障人群克服他们日常真实的视觉挑战。


VizWiz测试示例

看图内容创作

XVERSE-V 具备多模态能力的同时保持强大的文本生成能力,能够很好胜任理解图像后创造性文本生成的任务。


教育解题

模型具备了广泛的知识储备和逻辑推理能力,能够识别图像解答不同学科的问题。


百科解答

模型储备了历史、文化、科技、安全等各类主题的知识。


代码撰写


自动驾驶


情感理解与识别


元象公司介绍

一元复始,万象更新。元象 XVERSE 于 2021 年初在深圳成立,是国内领先的 AI 与 3D 技术服务公司,致力于打造 AI 驱动的 3D 内容生产与消费一站式平台,愿景为“定义你的世界”。

元象创始人姚星是前腾讯副总裁和腾讯 AI Lab 创始人、国家科技部新一代人工智能战略咨询委员会成员。元象累计融资金额超过 2 亿美元,投资机构包括腾讯、高榕资本、五源资本、高瓴创投、红杉中国、淡马锡和CPE源峰等。

元象获国家“专精特新”、“高新技术企业”认证,团队目前有75%为研发人员(60%为硕博学历)。公司积极推动前沿技术自主研发,在3D领域,自研行业引领性的“端云协同” 3D 互动技术,开创零门槛(轻)、一站式(快)、高品质(美)全新 3D 体验;在AI领域,公司最早开源国内最大参数大模型(650亿)、世界最长上下文长度(256K)在内的一系列高性能大模型,免费可商用,将国产开源提升至国际一流水平,积极推动大模型国产可替代和行业应用发展。

元象已经为多家龙头企业提供一站式技术与服务,包括:澳门大三巴、南京大报恩寺、央视、腾讯音乐TMELAND、华为、一汽大众、阿迪达斯、中国平安、中科院深圳先进院等。

公司注册名:深圳元象信息科技有限公司

官网:www.XVERSE.cn

官微:元象 XVERSE

Logo下载

链接:https://pan.baidu.com/s/1fB-zoITVJZ7Znv5IVe-fZg

提取码:rav0

雷峰网

相关内容

热门资讯

瑞丰银行招标结果:瑞丰银行LE... 证券之星消息,根据天眼查APP-财产线索数据整理,浙江绍兴瑞丰农村商业银行股份有限公司7月6日发布《...
“四个共享”助力百色芒果行销大... 7月9日,为期两天的“芒香入湾·合作共赢”百色芒果广东产销对接暨展销推介活动在广东区域协作消费帮扶产...
这个拥有百年历史的设备,正成为... 文|财联社 电力从发电端输送至用户端的全过程,约90%的电力都会流经变压器:输电环节升压以减少输电...
华泰证券执委陈天翔:AI进入财... 财联社7月10日讯(记者 赵昕睿)由财联社携手华夏基金、腾势共同举办的第五届财富管理论坛暨第三届“财...
第四届暑期港澳青创嘉年华缤纷日... 中新网广州7月9日电 (张璐 余冰冰)“创响湾区·就约盛夏”第四届暑期港澳青创嘉年华缤纷日活动暨大湾...
美元通胀变化如何影响黄金? 在金融市场中,美元通胀的变化对黄金价格有着显著的影响。要理解这种影响,我们首先需要明白美元通胀的本质...
原创 永... 2026年以来,永诚财产保险股份有限公司(下称永诚财险)合规风险持续暴露。这家由华能集团联合五大电力...
“为哈梅内伊复仇”,伊朗打击美... 伊朗南部布什尔市和乔加达克市9日晚传出爆炸声。当地居民表示,在伊朗南部的阿巴斯港也听到了数声爆炸。伊...
巴西将12%原油出口税延长60... △巴西首都巴西利亚(资料图) 巴西发展、工业、贸易和服务部9日发布会议决议显示,巴西对外贸易商会执行...
茅台健康产业公司挂牌转让10%... 茅台集团旗下一家公司部分股权被挂牌转让。 7月9日,南都湾财社-酒水新消费指数课题组记者从北京产权交...
深度 | FOF“赛马” 当数十万亿元到期存款寻找新出路时,一个曾蛰伏于公募版图角落的小众品类——FOF(基金中基金)正迎来一...
锚定价值创造 深耕全链协同 蒙... 7月9日,由中国奶业协会主办的第十七届奶业大会 奶业20强(D20)论坛暨2026奶业展览会在江西省...
原创 母... 创始人离世1年后爆发家族纷争。 作者 | 贾紫聪 编辑丨高岩 来源 | 野马财经 A股的资本江湖里...
AI制药的尽头,还得是CXO 2012年,当AlexNet在ImageNet竞赛中横空出世、将图像识别错误率一举降低近一半时,制药...
假如长鑫上市,冲上1万亿美金! 来源:市场资讯 来源:格隆 本文作者 | 弗雷迪 数据支持 | 勾股大数据 01 1995年一月,《...
SK海力士美国上市带动杠杆ET... 7月10日,财闻海外资讯消息,ProShares、Leverage Shares和Rex Share...
真金白银出手!近30家基金公司... 近期市场震荡之际,公募基金自购再度升温。 根据Wind公开数据统计,截至7月初,最近一个月已有近30...
人大讲座风波后,张小龙辞任CE... 本报(chinatimes.net.cn)记者于玉金 北京报道 人大讲座风波后,粉笔CEO张小龙离职...
Meta收涨4.7%背后:扎克... 格隆汇7月10日|Meta周四低开高走,最终收涨4.7%,报631.48美元。 据金融投资AI助手...