https://answer.freetools.me/categories/%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C/ Recent content in 神经网络 on Answer Hugo -- 0.152.2 zh-cn Fri, 13 Mar 2026 00:34:42 +0800 https://answer.freetools.me/%E5%BD%92%E4%B8%80%E5%8C%96%E5%B1%82%E7%9A%84%E5%8F%8C%E9%87%8D%E8%BA%AB%E4%BB%BD%E4%B8%BA%E4%BB%80%E4%B9%88batchnorm%E5%9C%A8%E8%AE%AD%E7%BB%83%E5%92%8C%E6%8E%A8%E7%90%86%E6%97%B6%E5%88%A4%E8%8B%A5%E4%B8%A4%E4%BA%BA/ Fri, 13 Mar 2026 00:34:42 +0800 https://answer.freetools.me/%E5%BD%92%E4%B8%80%E5%8C%96%E5%B1%82%E7%9A%84%E5%8F%8C%E9%87%8D%E8%BA%AB%E4%BB%BD%E4%B8%BA%E4%BB%80%E4%B9%88batchnorm%E5%9C%A8%E8%AE%AD%E7%BB%83%E5%92%8C%E6%8E%A8%E7%90%86%E6%97%B6%E5%88%A4%E8%8B%A5%E4%B8%A4%E4%BA%BA/ 深入解析神经网络归一化层的训练推理差异：从BatchNorm的running statistics机制到LayerNorm的一致性设计，揭示为什么有些归一化层需要两个计算模式，以及工程实践中如何正确使用它们。 https://answer.freetools.me/%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C%E4%B8%AD%E7%9A%84%E5%81%8F%E7%BD%AE%E4%B8%BA%E4%BB%80%E4%B9%88%E7%AE%80%E5%8D%95%E7%9A%84%E5%8A%A0%E6%B3%95%E5%A6%82%E6%AD%A4%E9%87%8D%E8%A6%81/ Thu, 12 Mar 2026 09:47:41 +0800 https://answer.freetools.me/%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C%E4%B8%AD%E7%9A%84%E5%81%8F%E7%BD%AE%E4%B8%BA%E4%BB%80%E4%B9%88%E7%AE%80%E5%8D%95%E7%9A%84%E5%8A%A0%E6%B3%95%E5%A6%82%E6%AD%A4%E9%87%8D%E8%A6%81/ 从感知机的决策边界到现代大语言模型的架构简化，深入解析神经网络中偏置项的数学本质、在不同层中的作用、以及为什么有些架构选择移除它。 https://answer.freetools.me/%E6%A2%AF%E5%BA%A6%E6%B6%88%E5%A4%B1%E4%B8%8E%E6%A2%AF%E5%BA%A6%E7%88%86%E7%82%B8%E4%B8%BA%E4%BB%80%E4%B9%88%E6%B7%B1%E5%B1%82%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C%E6%9B%BE%E7%BB%8F%E5%8F%AA%E8%83%BD%E5%A0%86%E5%8F%A0%E4%BA%94%E5%B1%82/ Thu, 12 Mar 2026 00:23:55 +0800 https://answer.freetools.me/%E6%A2%AF%E5%BA%A6%E6%B6%88%E5%A4%B1%E4%B8%8E%E6%A2%AF%E5%BA%A6%E7%88%86%E7%82%B8%E4%B8%BA%E4%BB%80%E4%B9%88%E6%B7%B1%E5%B1%82%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C%E6%9B%BE%E7%BB%8F%E5%8F%AA%E8%83%BD%E5%A0%86%E5%8F%A0%E4%BA%94%E5%B1%82/ 从1991年Hochreiter发现梯度消失问题，到2015年ResNet突破1000层训练障碍，深度学习的"深度"困境经历了二十五年的技术突围。本文深入解析梯度问题的数学本质、历史演进与解决方案。