推荐星级:
  • 1
  • 2
  • 3
  • 4
  • 5

门控循环单元(GRU)

更新时间:2026-05-29 19:51:31 大小:18K 上传用户:江岚查看TA发布的资源 标签:门控循环单元gru 下载积分:2分 评价赚积分 (如何评价?) 打赏 收藏 评论(0) 举报

资料介绍

一、GRU的基本概念

门控循环单元(Gated Recurrent Unit,GRU)是循环神经网络(RNN)的一种改进模型,由Cho等人于2014年提出。作为长短期记忆网络(LSTM)的简化变体,GRU通过引入门控机制解决了传统RNN在处理长序列时的梯度消失或梯度爆炸问题,同时具有更简洁的结构和更少的参数,在保持性能的同时提高了计算效率。

二、GRU的核心结构与原理

(一)主要组成部分

GRU包含两个核心门控单元和一个隐藏状态更新机制:

· 重置门(Reset Gate):决定是否忽略历史隐藏状态,用rt表示,取值范围为[0,1]。计算公式为:
rt= σ
其中,σsigmoid激活函数,Wrbr为重置门的权重和偏置,ht-1为上一时刻的隐藏状态,xt为当前时刻的输入。

· 更新门(Update Gate):控制历史隐藏状态和新信息的融合比例,用zt表示,取值范围为[0,1]。计算公式为:
zt= σ(Wz·[ht-1, xt] + bz)
其中,Wzbz为更新门的权重和偏置。



部分文件列表

文件名 大小
门控循环单元(GRU).docx 18K

全部评论(0)

暂无评论

上传资源 上传优质资源有赏金

  • 打赏
  • 30日榜单

推荐下载