自动微分

舍入误差、Taylor 系数与 reverse-mode 的数值分析前史

Linnainmaa 1976 年论文从有限精度计算出发，把累计舍入误差写成局部误差的 Taylor 展开，并由此暴露出 reverse-mode automatic differentiation 后来长期面对的两件事：反向累积影响系数与保存计算轨迹的存储代价。