产品派
返回

DeepSeek公开DSec支撑V4.1智能体训练

AI量子位2026/9/30 13:18:05
AI 导读

DeepSeek在知乎发布技术长文,首次系统介绍弹性计算基础设施DSec。相关报告已由DeepSeek与清华大学联合发布至arXiv,作者团队超过130人,梁文锋参与其中。DSec支撑DeepSeek-V4的训练、评测和数据预处理,使Agent能在沙盒中反复读写代码、安装依赖、运行测试并保留状态。

DSec通过统一Python SDK libdsec接入四类后端:复用容器、适合短任务的FnCall;启动快、密度高的Container;隔离性更强的MicroVM;以及支持图形界面、渲染和Android的Full VM。

系统将环境拆成基础镜像、工作区和工具包三层,生产数据曾涉及11,266个基础镜像、102,171个工作区及数百个工具包。三层分别管理版本,使用EROFS存储并借助OverlayFS运行时组合,更新时只重建变化部分。

镜像数据统一放在3FS,仅把EROFS元数据拉到本地,实际内容按访问读取;运行时实际访问量仅占镜像总量4.2%至13.3%。集中创建8,192个容器时,完成时间由60多分钟降至约35分钟,加速约1.71倍,磁盘写入减少57%;工作区从解压tar.gz改为挂载EROFS后,耗时由79分钟降至45分钟,写入量约降至原来的1/5.5。

Agent沙盒约90%的平均CPU用量不超过申请量5%,但内存需持续保留,因此生产环境超卖率超过50倍。virtio-pmem与DAX共享宿主页缓存后,峰值内存下降40.2%;DAMON和balloon空闲页回收使累计内存消耗下降21.2%。

DSec还优先调度时延敏感任务,并减少超线程干扰;当其他任务占用节点50% CPU时,相关任务时延增幅由45.2%降至17.3%。

从DeepSeek-V4.1起,Agent执行循环迁入DSec,与工作容器协同运行并置于可抢占GPU池之外,训练中断后可保留进度和环境,从断点继续。DSec还用pack_diff制作增量快照,支持环境复用和轨迹分叉;MicroVM可保存内存、进程状态,容器目前主要支持磁盘快照。

环境构建也由Agent完成,确保构建与运行环境一致。针对读取残留答案、伪造RPC、覆盖/bin/bash及利用XFS_IOC_SWAPEXT等行为,DSec以AppArmor限制文件和套接字访问,并通过eBPF设置网络白名单;但对利用内核缺陷的破坏行为,仍缺乏通用防御机制。

DeepSeek智能体训练沙盒基础设施弹性计算

本文基于公开渠道信息整理,内容可能存在不准确或遗漏之处,不代表本站立场,如内容涉及侵权或错误,请联系我们处理。

阅读原文