我注意到tf.nn.softmax_cross_entropy_with_logits要求logits参数的"未缩放的日志概率".但是,在提交给此函数之前,我没有看到任何人建议对其NN预测执行日志操作.我在这里错过了什么吗？
您不应该执行日志操作.你不应该执行任何事情,实际上:-).这个评论(可能说很差)试图说的是每个logit是一个不受限制的实数(负数或正数,大小或你想要的小).然后,softmax交叉熵函数(概念上)应用softmax操作(取幂,将无限制的实数转换为正数,然后归一化以使它们总和为1)并计算交叉熵.
所以,tl; dr,给你的最后一个线性层的输出提供没有任何规范化或传递函数,你就不会错.
| 归档时间： |
|
| 查看次数： |
1649 次 |
| 最近记录： |