动手学习深度学习读书笔记
学长老早就开始催着读这本书了,一直也不知道瞎忙啥呢,给我读,往死里读。
预备知识部分是mxnet的安装的一些方法,以及一些深度学下的基础语法。mxnet这个框架感觉不错。一致致力于被一个成熟的框架宠幸~
因此从深度学习的基础开始学习
深度学习基础
线性回归
线性回归从0开始讲的还不错,可以从0开始搭建一个线性回归。这一节比较简单略
待补充。。
softmax分类
交叉熵损失函数
softmax回归适应于分类的问题,使用softmax运算输出类别的概率分布。
softmax回归是一个单层的神经网络,输出个数等于分类问题中的类别个数。
交叉熵适合衡量两个概率分布的差异。
激活函数
sigmoid
relu