1.3 特征融合方法与损失函数改进优化
与弱监督网络结构与定位方法不同的是,特征融合方法与损失函数的改进是在前两者的125
基础上帮助前两者可以得到到更好的特征,增加类间距离减少类内距离。关于特征融合现有
的方法大多只是级联 concat 和求和 sum,这些方法限制了层间和层内的本质高阶关系,
HIHCA
[32]
提出了层级卷积响应的核融合机制使得不同特征可以更好的融合,使得多特征的
优势最大化。通过将卷积激活作为一个局部描述符,层级卷积激活可以处理不同尺度的局部
表示。提出一个基于预测器的多项式核来捕捉卷积激活的高阶统计信息,并通过核融合将多130
项式预测器拓展来对局部建模。 本文的目的是捕捉部件之间更复杂的高阶的关系,写成所
有成分的线性组合,多项式预测如下公式(1)所示。另外 RACNN 引入的排序损失函数、
常用的 triplet loss
[33]
、softmax loss 的变种及优化目的都是在缩小类内距离,增加类间距离,
从而使得细粒度识别的效果更好。其中 MAMC
[34]
便是提取每张图像的多个区域,然后按照
类别和区域的不同,采用 Triplet Loss 和 Softmax Loss 来训练网络。现有的很多方法是把目135
标的每个部位单独处理,忽略了他们之间的相关性。MAMC 能够拉近相同注意力并且是相
同类别的特征,同时拉远不同注意力或者不同类别的特征。使得分类效果更好。特征融合方
法与损失函数的改进优化这两个方面在细粒度识别领域的应用是最经济适用的,因为在不增
加模型耗时与显存的情况下仅根据训练优化就会使得模型有更好的结果。
(1)
2 应用介绍 140
基于深度学习的计算机视觉近些年发展迅猛,但是视觉算法理论的发展与实际的落地还
有很大的距离。在细粒度识别领域,目前最直接的落地实现便是百度、搜狗等公司推出的车
2021-12-08 11:26:24
605KB
首发论文
1