XM外汇中文网

全球领先的互联网券商

[XM外汇中文网]JetBrains开源Mellum-2代码模型:内置MTP头支持投机解码加速

币界网报道:币界网消息,JetBrains开源了面向软件工程的12B代码混合专家模型Mellum-2,总参数量为120亿,每个token仅激活25亿参数以控制推理开销。目前,所有权重已在Hugging Face发布,采用Apache 2.0协议。Mellum-2在架构上引入了多token预测(MTP)模块,推理时,MTP头作为内置草稿模型进行投机采样以加速生成。Mellum-2提供基础版、对话版和思考版三种版本,思考版通过基于规则验证的强化学习训练,能在输出最终答案前展示显式的思维链。基准测试中,基础版在Humaneval上的成绩为41.46%,MMLU准确率为70.87%。

法律: 此网站由XM Global Limited运行,注册地址是:Suite 404, The Matalon, Coney Drive, 伯利兹市, 伯利兹。

XM Global Limited受伯利兹金融服务委员会(FSC)授权和监管(牌照号: 000261/397),Trading Point of Financial Instruments Limited受塞浦路斯证券交易委员会(CySEC)授权和监管(牌照号:120/10),并均是Trading Point Group旗下公司。

风险提示: 外汇和差价合约交易对于您的投资资本含有风险。请确保您已通读并完全理解我们的风险披露。

受限地区: XM Global Limited无法为特定国家/地区的居民提供服务,例如: 美国, 加拿大, 以色列 和 伊朗伊斯兰共和国。

XM的网站和服务,均严禁开放提供给任何受国家/地区法律法规禁止使用的任何个体。因此,若选择从该国访问本公司网站,无论该国是否禁止使用本网站,用户在使用本网站时,均有责任确保自己遵守当地法律或法规。XM不保证本公司网站上的信息,适用于所有的司法管辖区域。