据动察 Beating 监测,The Information 援引知情人士称,MiniMax 正在研发一款 2.7 万亿参数大语言模型,最快可能在第三季度发布,并计划开源。模型内部代号为 M3 Pro,但最终发布名称尚未确定。
如果按计划开放权重,这款模型有望成为全球参数规模最大的开源大模型。MiniMax 现有旗舰模型 M3 为 4280 亿参数,新模型规模约为 M3 的 6.3 倍,也将超过目前多款万亿级开放权重模型。
更大的参数规模通常有利于复杂推理和多步指令任务,但最终表现仍要看训练质量、激活参数、推理成本和评测结果。
币须知道