跳到正文
模型
模型 Vals AI GPTDeepSeek

Vals:DeepSeek V4.1 Flash 1017 在模拟入侵任务上超过 GPT-6 Sol

Vals AI 10 月 20 日称:在自建「模拟企业网」多步进攻性网络安全任务上,开源权重 DeepSeek-V4.1-Flash-1017 平均成绩超过经 Daybreak 受信通道、降低拒答的 GPT-6 Sol;完整基准仍在建设中。

Vals 通过 Pi 终端 Agent harness,让模型持基础设施凭证在模拟企业网中推进入侵目标,直到自认无更多有用动作。DeepSeek 与 Sol 各跑三轮新鲜环境取平均,其余模型为单轮。Sol 走 OpenAI Daybreak 受信访问(可显著降低进攻类任务拒答),因此这是「开源权重 vs 降拒答闭源档」的对比,而非默认公网 API 对打。

厂商称 DeepSeek 吃更多 token,但按公开价 $0.30/$1.20 每百万输入/输出,总成本仍远低于 Sol 的 $2/$10。公开 CyberBench v1.1(找洞与打补丁)上 Sol 仍以 77.98% 略胜 DeepSeek 的 73.69%,且本场景的评分细则、环境镜像与完整日志尚未公开;Vals 表示数周内会放出更完整评测。解读宜收窄为「单任务初步信号」,勿外推成全面碾压。

Vals AI 官方配图:DeepSeek V4.1 Flash 1017 与 GPT-6 Sol 模拟网络安全任务对比

来源与参考资料

同栏目 · 模型

DeepSeek / GitHub

DeepSeek 开源生产推理框架 DeepInfer:跑 V4.1-Flash 的那套栈

DeepSeek 10 月 20 日以 Apache 2.0 开源 DeepInfer:自家大规模生产推理框架,官方称已用于 DeepSeek-V4.1-Flash 高吞吐低延迟服务;并同步放出 deepseek-recipe,对齐官方 API 的编解码逻辑。

DeepSeek DeepInfer 官方 Decode 吞吐与单用户速度 Pareto 图
Skyfall AI / India Today

Skyfall 发布工程世界模型 SKY-001:厂商称 CAD 上约 150 倍便宜于 GPT-6 Astra

Skyfall AI 推出面向 CAD/BIM 的工程世界模型 SKY-001:分层拆解装配与施工步骤;厂商自测 CAD IoU 79.7%(Astra 79.1%),单样本约 $0.005 / 3.9 秒,对比 Astra 约 $0.75 / 199 秒。

Skyfall 官方配图:Introducing SKY-001 工程世界模型
Meta / arXiv

Meta 公布 Muse Glimmer 30B 技术报告:单卡可跑的本地智能体模型

Meta 10 月 19 日公开 Muse Glimmer 技术报告:约 30B 稠密多模态开源模型(Apache 2.0),从 Muse Spark 蒸馏,4-bit 下可在单张消费级 GPU / Mac 跑本地 Agent;厂商称 MCP Atlas 工具调用 75.5,领先同级 Gemma4-31B 与 Qwen3.6-27B。

Meta 官方 X 配图:Muse Glimmer 30B 端侧智能体模型技术报告