智猩猩AI整理
编辑:林夕
Qwen这次可能要把大小模型一起端上来了。
10月10日,Qwen官方账号在X上发布了一张水豚主题图片,配文询问:“big or small?”(大的还是小的?)

几个小时后,官方又回复:“alright guys, let's do both!”(好吧,大小都要!)

两条看似轻松的互动,很快引发了社区对Qwen新一代模型的猜测。
结合随后出现的Qwen4-27B相关视觉物料,外界开始将目光投向两款模型:
Qwen4-27B与旗舰型号Qwen4-Max。
目前,这些消息尚未得到官方确认,但两款型号各自的看点已经引发讨论。
Qwen4-27B的看点在于本地部署。
27B参数规模为开发者提供了一个值得关注的选择,配合量化技术,有望适配更多硬件环境,用于本地推理、代码辅助等任务。
相比之下,Qwen4-Max是否开放权重,可能是这次传闻中更值得关注的部分。
如果旗舰型号也开放权重,开发者就有机会在自有基础设施上部署和适配更大规模的模型,进一步探索推理优化、私有化部署和复杂任务应用。
然后在等待Qwen4消息的同时,Qwen此前就已经公布过一款与下一代架构探索有关的开放权重模型。
今年8月,Qwen推出Qwen3.8-Flash-Next,作为探索下一代Qwen4架构的开放权重模型。

它仍属于Qwen3.8系列,并非正式的Qwen4版本,但也让开发者得以提前关注新架构的变化。

这款模型的技术变化集中在注意力机制、残差结构、Embedding和训练优化等方面。
在规模上,Qwen3.8-Flash-Next的主模型参数量为125B,每个Token激活约6B参数,另有51B的N-gram Embedding参数。
官方公布的技术资料显示,该模型原生支持262,144 Token上下文,并可通过YaRN扩展至100万Token。
到了9月,新任LLM负责人刘大一恒官宣了即将到来的Qwen4家族,涵盖Qwen4-Max、Qwen4-Flash、Qwen4-Plus和Qwen4-27B等多个型号。

Qwen团队还透露了更长远的训练计划,未来将训练参数规模达到5T至10T的模型。
与此同时,有传闻称Qwen4早期测试样本的表现已接近Fable、Claude Opus等模型,甚至有人将其与GPT-6进行比较。

此次Qwen官方账号接连发布“big or small?”和“let's do both!”两条互动内容,又为这些猜测添了一把火。
眼下,Qwen官推的“大小都要”已经给社区留下了足够的想象空间。
Qwen4-27B能否成为本地部署的新选择,Qwen4-Max又会以什么形式开放,仍有待官方揭晓。







