Gated Recurrent Unit (GRU)公式简介
2016-04-14 21:46
363 查看
update gate $z$: defines how much of the previous memory to keep around.
\[z = \sigma (x_t U^z + s_{t-1} W^z )\]
reset gate $r$:determines how to combine the new input with the previous memory.
\[r = \sigma(x_t U^r + s_{t-1} W^r )\]
Cell value $h$: \[h = \tanh (x_t U^h + (s_{t-1} \odot r) W^h)\]
hidden value $s_t$: \[s_t = (1-z)\odot h + z \odot s_{t-1}\]
相关文章推荐
- 随机生成10个数求和方法(11)
- [SpringBoot实践]spring-data-mongo自定义Repository接口及其实现
- slq获取某一时间段内的全部数据
- android 开发 时间的计算问题
- linux下的redis+spring集群整合(七)
- java中文乱码解决之道(四)-----java编码转换过程
- mycat - 解开它神秘的面纱
- 最新Hadoop-2.7.2+hbase-1.2.0+zookeeper-3.4.8 HA高可用集群配置安装
- poj 1007 DNA Sorting
- [C语言][LeetCode][141]Linked List Cycle
- [置顶] WPF HierarchicalDataTemplate模板修饰后treeviewitem对象
- 输入成绩看等级
- 编程之美 - 浮点数的精确表示
- 判断数A中是否存在一棵同构于B的子树
- p587有限自动机
- java中文乱码解决之道(三)-----编码详情:伟大的创想---Unicode编码
- [php-src]一个Php扩展的结构
- 软件工程概论课堂作业3
- 小谈业务应用架构
- here we go