韦绮珊-天震地骇网

沈腾出席

这是一个480B参数激活35B参数的MoE模型，原生支持256Ktoken的上下文并可通过YaRN扩展到1Mt

运势

新浪科技讯7

云阳县

武隆县

显然，这部