昇腾芯片默认采用了不确定计算加速模型训练,有时为了重复实验与对比实验需要确定性的计算结果,MindSpeed-LLM使能确定性计算的开关如下:
--use-deter-comp
export HCCL_DETERMINISTIC=True