softmax运算

一、softmax运算 分类问题需要得到离散的预测输出,一个简单的办法是将输出值oio_ioi​当做预测类别是i的置信度,并将值最大的输出所对应的类作为预测输出,即输出argmaxioiargmax_io_iargmaxi​oi​。例如,如果o1,o2,o3o_1,o_2,o_3o1​,o2​,o3​分别为0.1,10,0.1,由于o2o_2o2​最大,那么预测类别为2。 然而,直接使用输出层的输出有两个问题。一方面,由于输出层的输出值的范围不确定,难以直观判断这些值的意义。例如,上面举的例子中的输出值10表示很置信图像类别为猫,因为该输出值是其它两类的输出值的100倍。但是如果o1=o3=1