摘要

得益于其简洁性和鲁棒性，基于骨架的动作识别近年来受到了广泛关注。大多数现有方法利用局部网络（例如，递归神经网络、卷积神经网络和图卷积神经网络）分层次地提取时空动态特征。因此，局部依赖和非局部依赖分别在不同层级的层中异步捕获，前者包含更多细节信息，后者则包含更多语义信息。此外，现有的方法局限于时空域，忽略了频率域中的信息。为了更好地从多域同步提取详细和语义信息，我们提出了一种残差频率注意力（rFA）模块，用于关注频率域中的判别模式；同时提出了一种同步局部和非局部（SLnL）模块，在时空域中同步捕获细节和语义信息。此外，还提出了一种软边界焦点损失（SMFL），以优化整个学习过程，该损失函数能够自动进行数据选择并鼓励分类器中的内在边界。我们的方法在多个大规模数据集上显著优于其他最先进方法。