softmax模型、softmax运算、交叉熵损失函数、最大似然估计、Batch_size的合理选取

softmax回归

线性回归模型适用于输出为连续值的情景,而softmax回归的输出单元由一个变成了多个,且引入了softmax运算输出类别的概率分布,使输出更适合离散值的预测与训练,模型输出可以是一个像图像类别这样的离散值,其是一个单层神经网络,输出个数等于分类问题中的类别个数。

分类问题

考虑一个简单的图像分类问题,其输入图像的宽和高均为2像素,且色彩为灰度。这样每个像素值都可以用一个标量表示。将图像中的4像素分别记为,假设训练数据集中图像的真实标签为

版权声明:本文为licsber原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://www.cnblogs.com/licsber/p/MXNet-4.html