商汤开源新模型!SenseNova Loop-9B-Preview号称可媲美27B参数大小

商汤科技10月30日宣布开源商汤日日新SenseNova Loop-9B-Preview。

文章配图

一、采用Looped Transformer架构,9B参数媲美27B模型

官方表示,该模型采用Looped Transformer架构,引入循环计算、扩展模型的有效计算深度,并探索更充分的信息交互机制,提升模型在复杂任务上的处理能力,在仅9B的有限参数规模下,媲美27B参数大小模型。

SenseNova Loop-9B-Preview以9B尺度模型为基座,保留首尾各4层原始解码器模块,将中间层改造为参数共享的循环计算模块,通过多轮迭代扩展有效计算深度。在此基础上,模型进一步探索循环计算中的信息传递机制,尝试引入mHC(Manifold-Constrained Hyper-Connections),利用多路残差连接与受约束的信息混合,增强特征交互并维持信号传播的稳定性。

二、多项评测优于其他模型,部分指标超Qwen3.5-27B

据介绍,在当前评测设置下,模型在代码生成、办公场景和智能体任务等多个方向上均优于其他模型,并在WorkBuddy Bench、RaccoonPPT Bench和AutomationBench等评测中进一步超过Qwen3.5-27B。这些结果初步展现了通过扩展有效计算深度,提升小参数模型复杂任务处理能力的潜力。

文章配图

三、消融实验验证mHC收益,GPQA Diamond提升4.42分

商汤进一步通过消融实验评估了mHC的实际收益。采用该机制后,模型取得明显的性能提升,其中GPQA Diamond和TeamBench分别提高了4.42分和13.34分,展现出在复杂推理任务以及多步骤Agent任务中的应用潜力。后续还将继续探索DSA、自适应迭代次数等机制,以提升模型的推理效率与任务表现。

文章配图

也许你还喜欢

爱爱(Nosaka Hiyori,乃坂ひより)精

《爱爱精品选购踩过的坑不少人都遇过,退换货和试错成本加起来不低,选对渠道

www.九九插电网站建设的基本流程常

《www.九九插电网站建设的基本流程常被误解,以为买好域名空间就万事大吉

午夜成认福利凤美优(Kawakita Meis

《午夜成认福利凤美优(Kawakita Meisa,鳳みゆ)在线观看经验

伊人(Remi Sakuma,佐久間れみ)亚洲

《伊人(Remi Sakuma,佐久間れみ)亚洲饰品综合网选平台要分清真

wwwwww四虎狗宝这类网站访问异常原

《wwwwww四虎这类网站访问异常原因,多地用户反馈打不开页面,正常站点

九色苹果在线视频网址最新真假辨别

九色苹果在线视频网址最新真假辨别有讲究,仿冒站点频繁更换域名难分辨,正规

亚洲一区神木丽(Kamiki Rei,神木麗

《亚洲一区神木丽(Kamiki Rei,神木麗)18衣襟内容审核标准解读

婷婷花开五月天成认网站内容审核规

婷婷花开五月天成认网站内容审核规则说明,人工复核与系统筛查都要投入成本,

黄铯蜜桃(Asuna Kurosaki,黒崎あす

黄铯蜜桃(Asuna Kurosaki,黒崎あすな)资源回收一年能省多少

91樱花梨花在线视频不卡背后隐藏的

91在线视频不卡背后隐藏的坑,免费流畅往往靠压缩画质,弹窗广告和跳转链接