分类: systems
-
CS336:第 2 讲 PyTorch 与资源核算
第 2 讲是关于具体化训练成本:张量、数据类型、内存、FLOP、autograd、优化器、数据加载、检查点和混合精度都有资源价格。
-
AMP:自动混合精度作为调度策略
TLDR:AMP 并不是“将模型变成半精度”。它是一种运行时策略,可以以较低的精度运行安全、高吞吐量的操作,同时保护数字敏感路径。
-
Claude Code 源码:把智能体看成操作系统进程
从操作系统视角读 Claude Code,可以把智能体运行时具体化:上下文准备、工具、权限、子进程、取消、压缩、plugin 和退出路径。