2018年5月26日
softmax数值溢出 与 xent-loss问题
摘要： 1.在阅读tensorflow源码的softmax实现过程中，可以看到它的实现有两个特殊地方： ①计算e指数的时候，所有logits都减去了每行的最大值 ②其softmax_op_functor.h中，可以看到根据传入的log参数不同分别有两种不同计算方法。log为true时，计算LogSoftma 阅读全文
posted @ 2018-05-26 17:18 灰太狼锅锅 阅读(1465) 评论(0) 推荐(0) 编辑