arXiv · ML· Gabriel\.e Tij\=unaityt\.e, Thijs L. van der Plas, Mohamed-Bachir Belaid, Rob Knapen, Maciej J. Soja, Ioannis N. Athanasiadis·· 8 小时前AI 评分31
领域特定多模态嵌入的语言对齐框架
Domain-specific language alignment of multimodal embeddings towards explainable predictions
AI 导读
研究者提出一种语言对齐框架,用于使多模态嵌入可解释。该框架通过描述函数将辅助数据转化为部分描述,并使用软对比损失按属性相似度加权训练。 在物种分布建模任务(S2BMS 和 SatBird)中,AlphaEarth 嵌入在 7 项指标中的 6 项上超越了先前最先进模型。
来源:arXiv · ML · arxiv.org