(来源:界面新闻)
10月15日,阶跃星辰开源新一代大模型Step 5 Preview,同日,摩尔线程宣布旗下MTT S5000智算卡及MUSA软件栈已完成该模型的首日适配。Step 5 Preview采用稀疏MoE架构,总参数量600B,每Token激活27B参数,支持100万Token上下文窗口,摩尔线程此次适配涉及混合注意力、混合精度推理、投机解码等环节。
特别声明:以上文章内容仅代表作者本人观点,不代表新浪网观点或立场。如有关于作品内容、版权或其它问题请于作品发表后的30日内与新浪网联系。











