image.png

网络结构

A Relation-Augmented Fully Convolutional Network for Semantic Segmentationin Aerial Scenes - 图2

Spatial Relation Module

image.png

具体计算的是两个不同位置的Cx1x1大小的特征矢量xi和xj之间的关系,其中的f使用ReLU消除负空间关系:

image.png
image.png

具体流程:

image.png

仅使用空间关系可能会产生片面判断,这里再次结合原始信息,这里使用拼接的方式。

A Relation-Augmented Fully Convolutional Network for Semantic Segmentationin Aerial Scenes - 图7

Channel Relation Module

image.png

具体计算的是不同通道Xp和Xq之间的关系:

image.png
image.png

这里使用了全局平均池化来针对各个通道特征进行处理。

具体流程:

image.png

我们通过采用softmax函数来强调与类相关的通道关系以及抑制不相关的通道依赖性:

image.png

为了将通道关系集成到原始特征上,使用如下计算:

image.png

最终X又被调整为CxHxW。

集成方式

image.png

实验结果

image.png

image.png

image.png

参考链接