johnsonshu
V2EX  ›  问与答

关于神经网络的反向传播

  •  
  •   johnsonshu · Aug 12, 2021 · 1799 views
    This topic created in 1909 days ago, the information mentioned may be changed or developed.

    我一直理解不了梯度。

    假设: <input> => layer01 => layer02 => layer03 => <output>

    反向传播时求出来的梯度, 到底是针对哪一层的梯度啊。

    layer01,02,03 上所有的权重参数都更新吗?

    3 replies  •  2021-08-12 14:08:38 +08:00
    jdhao
    jdhao
    Aug 12, 2021 via Android❤️1
    1
    对,计算 loss 对各个层的偏导数,然后更新各层参数
    Ehend
    Ehend
    Aug 12, 2021 via Android
    2
    一楼回答完了
    aguesuka
    aguesuka
    Aug 12, 2021
    3
    我是把梯度看作牛顿法的导数理解的
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   4950 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 43ms · UTC 01:35 · PVG 09:35 · LAX 17:35 · JFK 20:35
    ♥ Do have faith in what you're doing.