跳到正文
arXiv · NLP· Junyi Hu, Zhewen He, Haomian Huang, Zhenhua Li, Zhifei Li, Shuaihang Yuan, Yi Fang·· 16 小时前AI 评分24

SignDEG:利用自监督手部几何特征提升手语识别性能的时序编码器

DINO Eats Geometry: Self-Supervised Sign Representations that Absorb Articulated Hand Geometry

AI 导读

SignDEG 提出了一种将自监督手部几何信息融入视觉特征的时序编码器,在 How2Sign/OpenASL 数据集上取得 17.9/24.5 BLEU-4 成绩,优于对比模型 SHuBERT 的 16.2/23.2。

来源:arXiv · NLP · arxiv.org