原文:Pytorch学习笔记12----损失函数nn.CrossEntropyLoss()、nn.NLLLoss()

.CrossEntropyLoss 损失函数 交叉熵主要是用来判定实际的输出与期望的输出的接近程度,为什么这么说呢,举个例子:在做分类的训练的时候,如果一个样本属于第K类,那么这个类别所对应的的输出节点的输出值应该为 ,而其他节点的输出都为 ,即 , , , , . , ,这个数组也就是样本的Label,是神经网络最期望的输出结果。也就是说用它来衡量网络的输出与标签的差异,利用这种差异经过反向传 ...

2020-08-03 18:20 0 847 推荐指数:

查看详情

pytorch中的nn.CrossEntropyLoss()

nn.CrossEntropyLoss()这个损失函数和我们普通说的交叉熵还是有些区别。 $x$是模型生成的结果,$class$是数据对应的label $loss(x,class)=-log(\frac{exp(x[class])}{\sum_j exp(x[j])})=-x[class ...

Thu Dec 12 00:13:00 CST 2019 0 3235
nn.CrossEntropyLoss

nn.CrossEntropyLoss pytorch中交叉熵计算方式为: \[H(p,q) = -\sum p(i)logq(i) \] 其中,p为真实值矩阵,q为预测值矩阵 当P使用one-hot embedding时,只有在分类正确时 nn.CrossEntropyLoss ...

Sun Mar 06 00:28:00 CST 2022 0 916
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM