Gemini 发现 AI 框架致命 Softmax 漏洞
← 返回今日版面来源
2 条谷歌DeepMind主任研究科学家Jon Barron揭示AI基础运算中的致命Bug,涉及Softmax和交叉熵,影响PyTorch、JAX等框架。模型越自信,舍入误差越大,导致训练信号消失,优化器失控。Gemini率先发现并修复此Bug。
Google DeepMind首席研究科学家Jonathan T. Barron指出,包括PyTorch、JAX、TensorFlow在内的主流深度学习框架普遍采用的Softmax函数存在隐蔽Bug。