原文链接:Focal Loss for Dense Object Detection 作者: Tsung-Yi Lin Priya Goyal Ross Girshick Kaiming He Piotr Dollar 博客参考:Pytorch CELoss,10分钟理解 Focal loss
Focal loss 产生的 loss 相对于 cross entropy loss 来说都更小。但是相对来看,它更倾向于将简单 Samples 的 loss 忽略掉,关注于难分 Samples(比如 y=5 时,对于 pt 较大时,其产生的 loss 基本上为 0,但是对于 pt 较小,极端地看,在 pt = 0 附近时,其产生地 loss 和 cross entropy loss 相近。