大模型落地手机芯片!阿里云牵手联发科趟路子,低迷手机市场等风来 大模型产业化落地 大模型阿里云
admin
2024-03-29 10:09:20
0


本报(chinatimes.net.cn)记者卢晓 北京报道

AI大模型在手机终端上的部署日益提速。

3月28日,阿里云与联发科联合宣布,通义千问18亿、40亿参数大模型已成功部署进天玑9300移动平台。据悉,这是通义大模型首次完成芯片级的软硬适配,同时意味着Model-on-Chip的探索正式从验证走向商业化落地新阶段。

在这背后,本身拥有计算能力的终端被认为是AI大模型落地的重要场景之一,特别是使用频率极高的手机。与此同时,外界也期待AI大模型能搅动疲软许久的手机市场。

端侧大模型加速

在手机终端部署AI大模型,手机算力决定了大模型的表现。

记者从阿里云方面了解到,通义千问18亿参数开源大模型,在多个权威测试集上性能表现远超此前SOTA模型,且推理2048 token最低仅用1.8G内存,是一款低成本、易于部署、商业化友好的小尺寸模型。天玑9300集成MediaTek第七代AI处理器APU790,生成式AI处理速度是上一代AI处理器的8倍。

此外,阿里云方面还告诉《华夏时报》记者,双方团队也已完成了通义千问40亿参数大模型与天玑9300的适配,未来还将基于天玑适配70亿等更多尺寸大模型,“打样”并支持开发更多AI智能体及应用。“不是参数越大越好,适配最重要。”阿里云相关人士告诉记者。

据记者了解,通义千问是阿里云自研的基础大模型,迄今已推出千亿参数的2.0版本以及开源的720亿、140亿、70亿、40亿、18亿、5亿参数等尺寸,以及视觉理解模型Qwen-VL、音频大模型Qwen-Audio等多模态大模型。

有业内人士在跟记者交流时认为,利用终端算力进行AI推理,可大幅降低推理成本、保证数据安全并提升AI响应速度,让大模型可以更好地为用户提供个性化体验。

3月24日,上海人工智能实验室领军科学家林达华在2024全球开发者先锋大会大模型前沿论坛也提出,伴随着云侧计算的指数级增长,端侧计算将迎来黄金增长期。目前,很多模型越做越小,可以直接进入手机运用。为此,手机算力也需不断增长。未来,云端协同将成为重要趋势,大模型用户量的增长将主要依靠端侧。

不过需要提及的是,在手机端部署大模型并不容易。

据记者了解,要将大模型部署并运行在终端,需完成从底层芯片到上层操作系统及应用开发的软硬一体深度适配,存在技术未打通、算子不支持、开发待完善等诸多挑战。

阿里巴巴通义实验室业务负责人徐栋介绍称,阿里云与联发科在模型瘦身、工具链优化、推理优化、内存优化、算子优化等多个维度展开合作,实现了基于AI处理器的高效异构加速,真正把大模型“装进”并运行在手机芯片中,给业界成功打样端侧AI的Model-on-Chip部署新模式。

搅动低迷手机市场

作为全球智能手机芯片出货量最高的半导体公司,联发科与阿里云在端侧大模型的合作,对手机市场影响不言而喻。Canalys最新数据显示,其2023年第4季度出货超1.17亿部,苹果以7800万出货量位居第二,高通以6900万出货量位居第三。

事实上不只联发科,今年3月,高通也宣布推出第三代骁龙8s移动平台,支持100亿参数级别的大语言模型,也能够支持多模态生成式AI模型,由小米Civi 4 Pro全球首发。

手机终端厂商布局AI大模型更早。据记者了解,去年10月发布的小米14以及14Pro,已经部署了AI端侧大模型。今年2月,OPPO对外发布了自己的1+N智能体生态战略,魅族也在宣布进行战略调整,停止传统“智能手机”新项目的开发,全力投入新一代AI设备。

在手机产业链都全力AI背后,TechInsights给出的数据显示,2023年全球智能手机的换机率可能会跌至23.5%(换机周期为51个月)的最低点。

IDC发布的《AI手机白皮书》预计,2024年起新一代AI手机将带动新一轮换机潮,2024年全球新一代AI手机出货量将达到1.7亿部,约占智能机整体出货量的15%,具体到中国市场,IDC也预计,随着新的芯片和用户使用场景的快速迭代,新一代AI手机在2027年将达到1.5亿台,市场份额超过50%。

在此之前,手机市场已经低迷太久。就在刚过去的2023年,IDC数据显示,当年全球智能机出货量同比下降3.2%至11.7亿部,为十年来最低,当年中国智能机出货量约2.71亿台,同比下降5%,也创下近10年以来最低出货量。

AI大模型被期待能成为刺激手机市场增长的强心针。不过IDC中国高级分析师郭天翔对《华夏时报》记者指出,随着芯片的升级,会有更多手机从算力上可以支持大模型,但对于消费者而言,短时间内AI大模型尚不会成为刚需,难以成为推动消费者换机主推力。

责任编辑:黄兴利 主编:寒丰

相关内容

热门资讯

贷款也“拼团” 银行抢单忙 购物能“拼团”,贷款也能! 近日,一场“拼团融资”的银企对接活动在省工业和信息化厅拉开帷幕。 “贷款...
逛花展、赶市集、嗨直播!202... 5月23日 “2026北京直播电商购物月” 在丰台区丽泽金融商务区·2026北京国际花展 正式拉开帷...
2026中关村毕业季|AI“吃... “上帝会掷骰子吗?” 在联想未来中心的“与智者同场”展区,一位海淀学子对着屏幕问道。 爱因斯坦微微前...
原创 今... 今日为5月23日,国际现货黄金价格在4500美元/盎司整数关口附近徘徊不前,日内最低触及4480美元...
三连亏后变为“无主”状态,农尚... 从吴亮手中接盘农尚环境(300536)不足三年后,林峰如今让出了公司控制权,上市公司进入“无主”状态...
55岁湖南女首富出手!豪掷13... 快科技5月24日消息,与马斯克、库克并肩而坐,刚参加完国宴的湖南女首富周群飞就买了家上市企业。 近日...
外资加仓A股,岂是跟风这么简单... 熬过忙碌的交易日,在周末安静时段,理清接下来布局方向。本篇为大家准备了5条要闻,涵盖市场动态、行业变...
原创 俄... 在全球能源的残酷牌桌上,手里攥着石油,腰杆子才能硬气。长期以来,中东的沙漠、俄罗斯的冰原、美国的页岩...
喜力啤酒有产品将涨价,华润啤酒... 来源:红星新闻 红星资本局5月22日消息,今日,红星资本局从雪花啤酒(厦门)有限公司、华润啤酒方面获...
原创 金... 心理预期调整刻不容缓,五月二十二日,黄金价格或将重现十五年前的历史性低迷。 近期若您密切关注着黄金市...
原创 马... 埃隆·马斯克如果能让SpaceX实现“科幻小说”级别的目标,他可能获得1万亿美元的收入。 埃隆·马斯...
涨涨涨!放开限制、可加杠杆!这... 韩国股市站在风口上! 据最新消息,为吸引更多海外资金进入股市,韩国政府计划放开限制,允许境外投资者直...
下周9家上会丨科创板首单IPO... IPO及再融资上会预告 据交易所官网审核动态信息,下周(5.25-5.29)IPO上会审核6家企业,...
富途、老虎市值蒸发1/4!或被... 来源:金融时报 5月22日,中国证监会宣布依法对Tiger Brokers (NZ) Limited...
马爸爸的好兄弟钱多多搞了杀猪盘... *此图由AI生成 作者| 史大郎&猫哥 来源| 是史大郎&大猫财经Pro 上周四,港股经纬天地大崩盘...
原创 壳... 编辑:XL 国际能源圈最近炸开了锅,壳牌这家百年石油巨头在2026年3月与委内瑞拉政府正式签署多项油...
存储热潮愈演愈烈!奖金拿到手软... 财联社5月24日讯(编辑 卞纯)在席卷全球的存储芯片热潮中,韩国“存储芯片双雄”SK海力士和三星无疑...
揽牌、合作、生态,跨境支付头部... 近日,国内头部跨境支付机构密集落地海外重要布局,一方面,连连数字、PingPong两家公司相继在中东...
原创 帮... 老铁们,周末好!我是帮主郑重。刚扫了一眼下周的财经日历,好家伙,事件一个接一个,堪称“消息面轰炸周”...
海南省住建厅与中国石化海南石油... 5月22日,中国石化海南石油分公司代表、党委书记李新强、总经理蔡文东一行赴海南省住建厅拜访交流。省住...