递归神经网络(RNN) - 忘记层和TensorFlow

use*_*751 8 python tensorflow recurrent-neural-network

我是RNN的新手,我正在试图找出LSTM细胞的细节,它们与TensorFlow有关:Colah GitHub 在此输入图像描述 与TensorFlow相比,GitHub网站的示例使用相同的LSTM单元吗?我在TensorFlow网站上唯一得到的是基本LSTM单元使用以下架构:Paper如果它是相同的架构,那么我可以手工计算LSTM单元的数字并查看它是否匹配.

此外,当我们在张量流中设置基本LSTM单元时,它会num_units根据:TensorFlow文档获取

tf.nn.rnn_cell.GRUCell.__init__(num_units, input_size=None, activation=tanh)
Run Code Online (Sandbox Code Playgroud)

这个隐藏状态(h_t)和细胞状态(C_t)的数量是多少?

根据GitHub网站,没有提到细胞状态和隐藏状态的数量.我假设他们必须是相同的号码?

hur*_*urk 4

GRUCell实现看起来与类文档相同,也指向同一篇论文(特别是门控),链接在 Colah 的文章中给出。参数是对应于属性定义num_units的单元格数量(假设是隐藏层)。output_size