IQuest-Q1 开源了:3200 亿 MoE 编程大模型,512K 上下文,主打 Agent 编程

3次阅读
没有评论

又一个开源编程大模型:IQuest-Q1。MoE 架构,总参数约 3200 亿,每个 token 激活约 150 亿;上下文 524288,也就是 512K。主打 Agent 编程、推理和多步工具调用。

官方推荐用 SGLang 或 vLLM 部署,示例是 8 卡张量并行。权重在 Hugging Face 的 IQuestLab 下。个人显卡就别想了,适合有机器的团队拿去试。

正文完
 0