大模型
x.com ·
@DeepSeek (@deepseek_ai)
DeepSeek 发布非对称架构模型:552B 参数 MoE,输入 8B/输出 16B 激活
DeepSeek 官方 X 账号介绍其新模型采用非对称架构:552B 参数 MoE,搭配新的 Causal Encoder–Decoder 结构,输入侧仅 8B 激活参数、输出侧 16B 激活参数。官方称结合新预训练方法与更大规模 RL 后训练,基准结果超过包括 DeepSeek-V4-Pro 在内的旗舰模型。该帖为系列说明的第 2/6 条,未披露具体基准名称与数值,结论尚待更多证据。
AI推荐理由 来自 DeepSeek 官方 X 账号的模型架构预告,给出具体参数与结构信息:552B 参数 MoE、Causal Encoder–Decoder 非对称架构(输入 8B 激活、输出 16B 激活),并称新预训练方法加大规模 RL 后训练在基准上超过包括 DeepSeek-V4-Pro 在内的旗舰模型。信息密度较高且属官方一手发布,但仅为系列帖第 2/6 条,未提供基准名称、具体数值、训练数据或可复现细节,'超过旗舰模型'的结论缺乏可验证证据,需保留不确定性。互动量仅作传播信号,未计入质量评分。
78
浏览 187,912
点赞 1,682
评论 33
转发 129
正文
🧠 Asymmetric architecture. More intelligence, less cost.
🔹 552B-parameter MoE.
🔹 New Causal Encoder–Decoder architecture: just 8B active parameters for input, 16B for output.
🔹 New pre-training methods + larger-scale RL post-training deliver benchmark results ahead of flagship models, including DeepSeek-V4-Pro.
2/6