分享好友 最新资讯首页 最新资讯分类 切换频道
把大模型揣进自己的小口袋,上海交大团队发布全球首个端侧原生稀疏大模型
2025-08-24 10:51

图片

如果拥有一个能揣进裤子口袋的大模型,它能随时连接你的手机、汽车、电脑、眼镜,不用联网保护隐私,还能随时随地用聪明大脑辅助工作、娱乐等各种需求,你会心动吗?

7月26日,在徐汇西岸,上海交通大学携手徐汇区人民政府举办的2025世界人工智能大会分论坛“AI 未来发展论坛:超级智能,无界共创”主题论坛上,上海交通大学发布了多项AI重大科研成果,其中“全球首个端侧原生稀疏大模型”吸引了与会者的好奇。

目前智能终端厂商提供的端侧大模型服务集中于小规模量化模型,模型效能相比于云端大规模未压缩模型大幅下降。上海交大计算机学院特聘教授糜泽羽介绍,这款端侧大模型面向端侧设备的异构算力、异构内存、功耗等约束进行原生设计,“一步到位”训练出与端侧硬件“精巧匹配”的百亿大模型,并与终端智能操作系统在推理部署时进行协同设计,能够解决模型智能水平衰减问题,为端侧设备提供接近云侧大语言模型智能水平的流畅大语言模型服务。

糜泽羽从口袋中拿出手机大小的初代产品,这只能够“握在手中”的硬件智力水平指标已领先国际同等规模开源大模型,并且在百元级国产端侧芯片上流畅运行(>10 Tokens/s)。

据悉,端侧原生大模型可在AI PC、AI手机、智能座舱、AI眼镜等新型智能终端中广泛应用,无需联网即可体验接近云端智能水平的大模型智能服务,有效解决数据隐私焦虑、云上调用成本高、时延不稳定等问题。“这个产品将面向所有人。我们希望它能够在保护数据隐私的同时,提供千人千面的个性化智能服务,提升生活品质。同时,能显著降低云服务成本,并引爆智能终端市场、催生新应用新业态。”糜泽羽说。

会上同时发布的还有科学基座大模型Innovator与科研智能体 SciMaster、DeepRare:推理型罕见病智能体诊断系统、MemOS全球首个大模型记忆操作系统,以及Data-centric AI 基础设施,这些成果集中展示了上海交大在AI底层技术突破方面的进展,以及AI在终端、医疗等领域大规模应用、赋能行业的巨大潜力,在彰显高校科研实力的同时,为相关产业提供了可复制、可推广的技术方案。论坛上还展示了由上海交大和中国福利会联合成立的上海市青少年AI学院的学生作品,富有想象力的AI创作与原型展现了科技传承的生机与活力。

最新文章
文化中国行丨解码福建土楼 鹅卵石墙角竟是防盗“黑科技”
“福建土楼”起源于宋元时期,主要分布在福建省龙岩市永定区,漳州市南靖县、华安县。它是独特的山区大型夯土民居建筑,又融入了
雷柏VT3 MAX鼠标评测:性能参数同样最强 找到最适合自己的才是最好的
一、前言:电竞鼠标性能已经超出玩家需要了之前我们测试了雷柏的VT7 MAX,首发NORDIC 54芯片,实现原生8KHz回报率同时还有更低的
北京强降雨,工商银行、农业银行、中国银行、建设银行、交通银行、邮储银行、兴业银行、浙商银行、北京农商银行等,筑牢金融“安全堤”!
“徐阿姨,您安全吗?”——怀柔区是此次强降雨的严重受灾地区之一。7月28日,当建设银行怀柔支行客户经理孙莹拨出第N通电话后,
中国体彩辟谣!
“中国体育彩票订阅号”微信公众号12日发文称,再强大的AI也无法预测中奖号码。中国体彩表示,大乐透每次开奖都是独立的,随机事
台风“麦德姆”将于5日登陆
中央气象台10月4日6时发布台风橙色预警。今年第21号台风“麦德姆”已加强为台风级,中心位于南海北部海面,最大风力12级。预计,
从AWE的顶流到“海总”的出道即火,海尔解码“何以海尔”
3月21日,海尔集团董事局主席周云杰的个人社交账号发布首条视频,宣告这位“被动网红”正式开启与公众的零距离对话。视频中,周
华为手机也有性价比,卫星通信手机才卖2548元,512GB+麒麟9000SL
谈到华为,不少网友都会感到惋惜,因为早些年,华为可是占据了国内市场一半的手机销量,但由于老美的无理打压,导致华为的手机业
1月13日晚间重要公告一览
1月13日晚,济川药业(600566)发布公告称,全资子公司济川药业集团有限公司(简称“济川有限”)已收到国家药品监督管理局颁发
供应POM-100P美国杜邦 高粘度
供应POM 100P 美国杜邦 高粘度 注塑级 均聚物用途:齿轮.工程配件.片材.传送机.管道.电线电缆应用.紧固件.铸造薄膜特性备注:有优
篮球——NBA常规赛:勇士胜独行侠
当日,在2024-2025赛季NBA常规赛中,主场126比102战胜。2月23日,勇士队球员波杰姆斯基(左上)在比赛中拼抢。新华社发(董旭东