开源模型 · 2026-09-02
Qwen3.8-Flash-Next 的 1M 上下文省在哪里:6B 激活参数只是第一层
Qwen3.8-Flash-Next 用稀疏注意力、线性状态和 N-gram Embedding 降低长上下文成本。实验权重、托管版与 OpenAI 兼容接入仍有明显边界。
Qwen3.8-Flash-Next 的 1M 上下文省在哪里:6B 激活参数只是第一层
Qwen 团队近期开放 Qwen3.8‑Flash‑Next 权重,并在本周继续更新 FP8 版本与部署支持。模型卡给出的结构是 125B 主参数、每 token 激活 6B,另有 51B N‑gram Embedding 和 4B 多 token 预测模块;原生上下文为 262,144 token,可扩展到 1,000,000。它还是计划用于 Qwen4 的实验架构预览,与 Qwen Cloud 上面向生产、默认提供 1M 上下文和内置工具的 Qwen3.8‑Flash 需要区分。
三层记忆各自处理不同成本
模型的 48 层按 3 个 Gated DeltaNet 层加 1 个 Qwen Sparse Attention 层循环。DeltaNet 把历史压进固定状态,适合持续记忆;稀疏注意力则把序列聚合成 micro-block,再从中选择相关区域。官方给出的 QSA 预算是 512 个 block、约 2048 token,避免每一层都对完整百万 token 做全注意力。
N‑gram Embedding 又承担另一类工作。51B 参数通过短词组索引读取,位置可预先确定,因此可以放在主机内存并异步预取,不必永久占用 GPU。它增加了局部模式容量,却不会像普通稠密参数那样每个 token 都参与大矩阵计算。这个设计对代码、固定术语和重复表达可能有价值,但主机内存带宽与 PCIe 传输仍可能成为部署瓶颈。
Qwen 报告在 1M token 下,QSA 注意力内核的 prefill 和 decode 最高分别提速 7.6 倍与 4.9 倍;在 90% 前缀缓存命中的实验场景中,Flash‑Next 的 prefill 吞吐达到 Qwen3.7‑Plus 的 8.6 倍。这是特定内核和高缓存命中下的厂商结果,真实业务仍应测首 token、输出速度和并发尾延迟。
1M 上下文是能力上限,不是输入建议
百万上下文常被理解为可以把整个仓库、知识库和日志一次塞入请求。这样做会让 prefill 时间、缓存占用和费用迅速上升,模型也未必能稳定找到中间证据。更经济的做法仍是先做文件选择、搜索或 RAG,只在需要跨远距离依赖时扩大窗口。评测应设计“证据在开头、中间和结尾”的样本,并检查引用准确率,不能只看请求成功返回。
模型默认开启 thinking,官方示例的 reasoning_effort 默认为 xhigh,也支持 medium 与 low。降低推理强度会缩短单轮响应,却可能因为规划不足导致 Agent 重试,最终 token 和总耗时反而增加。团队应按任务设置:格式转换和短摘要用非思考或低档,跨文件改造与复杂工具调用再提高;同一任务重复运行,统计成功率和完整完成成本。
OpenAI 兼容接口统一了调用,没统一能力细节
Qwen3.8‑Flash‑Next 可由 vLLM 或 SGLang 暴露 /v1/chat/completions,官方示例使用 OpenAI SDK。文本、图片和视频输入、reasoning_content、enable_thinking、preserve_thinking 等扩展参数仍取决于推理框架。把 Base URL 指向 [OpenAI 兼容 API](/) 后,视频采样、思考保留和工具调用仍要逐项测试。权重采用 qwen-community-1.0 许可,企业应核对条款。
如果通过模型聚合平台调用,还要确认平台提供的是实验 Flash‑Next、生产 Qwen3.8‑Flash,还是经过量化的第三方部署;相近名称并不代表权重、上下文和许可完全一致。路由层应记录真实模型 ID、上下文截断、推理档位和用量。对长文档与 Agent 工作流,可以让另一个独立模型复核关键引用,避免把一次成功的长输入等同于可靠检索。
来源:[Qwen3.8‑Flash‑Next 官方技术说明](https://qwen.ai/blog?id=qwen3.8-flash-next);[官方模型卡](https://huggingface.co/Qwen/Qwen3.8-Flash-Next)
用真实任务比较长上下文模型
统一接口后,继续核对模型版本、思考档位、截断和单位任务成本。
查看模型入口