笔记 - 深度学习脉络整理:2.损失函数

  • 脉络结构
1. 结构
2. 损失
3. 优化

在这里插入图片描述
在这里插入图片描述

思考:
为什么使用softmax
softmax存在的问题
交叉熵损失的含义

  • 题外话:清楚原理之后,可以对它进行改进
使用 softmax 的时候,有一个默认的前提,就是每个物体只属于一类
比如人脸识别,每张脸只能对应一个人

在这里插入图片描述
在这里插入图片描述

思考:

  1. sigmod二分类的Loss,与softmax多分类的Loss 的区别
  2. sigmod 与 softmax的 区别

欧氏损失

在这里插入图片描述


在这里插入图片描述


在这里插入图片描述


在这里插入图片描述


在这里插入图片描述

  • 损失函数加权

在这里插入图片描述

  • 样本加权

在这里插入图片描述


在这里插入图片描述

  • 对softmax loss 进行改进

---

猜你喜欢

转载自blog.csdn.net/chen_holy/article/details/91492766
今日推荐