arXiv · ML· Stefano Maria Iacus, Haodong Qi·· 7 小时前AI 评分25
ISBC: 预训练文本嵌入的可解释稀疏二进制编码
ISBC: Interpretable Sparse Binary Coding of Pretrained Text Embeddings
AI 导读
提出 ISBC 方法,从冻结嵌入中无监督学习少量二进制维度,无需分类标签或下游结果。 通过可训练编码器和仿射解码器,结合重构与活跃度、因子利用等控制项,在混合领域语料中有效识别来源集合及情感、迁移对比。 二进制坐标及其组合可用于实证解释,提供精细且部分依赖初始化的上下文描述,而非唯一的离散分类法。
来源:arXiv · ML · arxiv.org