torch.compile 图断裂:先定位重编译,再谈模式选择DL2026年7月27日·9 分钟阅读torch.compile 图断裂:先定位重编译,再谈模式选择从 Dynamo guard、graph break 与动态形状入手,建立可复现的编译诊断和冷启动、稳态验收方法。#深度学习#PyTorch#性能工程READ →
PyTorch SDPA 的两个静默坑:布尔 mask 与 eval dropoutDL2026年7月26日·3 分钟阅读PyTorch SDPA 的两个静默坑:布尔 mask 与 eval dropout拆清 scaled_dot_product_attention 的 keep-mask 语义、广播维度和 dropout_p 行为,用最小张量测试阻止注意力泄漏。#深度学习#PyTorch#TransformerREAD →
CE target long dtype 断言DL2026年7月8日·6 分钟阅读CE target long dtype 断言PyTorch 广播让错误 shape 的 loss 能跑起来——silent bug 产生错误梯度;写 forward 时 assert shape 或用 torchdim 习惯。#深度学习#PyTorch#调试READ →