原文链接：https://arxiv.org/pdf/1904.01189.pdf 代码链接：https://hub.fastgit.org/microsoft/SGN

image.png
image.png

Joint-level module

  • 采用 GCN 进行关节点信息的传播；
  • 采用自注意力机制代替了临接矩阵；（全局连接，计算自注意力 map O(V^2)复杂度）
  • 自注意力机制是会打乱顺序的，引入位置编码（空间域和时域都引入了）

  • 通过自注意力机制产生的 G 在三层 GCN 中共享（有些文章是每层计算一次，每层算一次效果更好？）

    Frame-level module

  • 空间域和时域完全分开了，多层 GCN 处于空间域之后，再单独处理时间域

  • 两个 cnn 进行局部时域信息的提取