深度学习核心技术

GRU 门控循环单元

Gated Recurrent Unit,一种高效的循环神经网络架构 通过简化的门控机制,将遗忘门和输入门合二为一 实现了门控融合结构合并,在保持效果的同时大幅提升计算效率

GRU 简化门控结构
当前输入
Xₜ
更新门 zₜ
删旧信息+存新信息
二合一搞定
重置门 rₜ
决定如何组合
新信息与旧记忆
隐藏状态 / 单一记忆通道
ht-1
桂林 / 艾玛
ht
当前输出
hₜ
传递到 下一时刻
门控融合 + 结构合并,计算更高效