AI 圈大事记

研究提出SpeechLLMs判别式适应方法

论文AI 评分 65/100arXiv cs.AI待复核
AI 聚合

本条为 AI 依据下方公开信源自动整理生成的摘要,不构成转载,可能存在偏差,请以原文为准。整理者:贝果科技 AI 资讯助手

针对语音大模型在情感识别任务中依赖生成式解码器导致标签外泄和类别偏差的问题,研究人员提出了一种判别式适应方法。该方法通过分类头读取最终提示词的隐藏状态,在不修改主干网络的情况下单次前向传播输出标签。在IEMOCAP数据集上的实验显示,该方法提升了Macro F1分数并消除了幻觉现象,尤其在真实ASR转录文本上收益最大。

为什么值得看

在不改变模型结构的前提下,显著提升了语音大模型在情感识别上的准确性与可控性。

大模型幻觉语音数据集

信源1

  1. [1]arXiv cs.AI一手信源Reading Emotions in the Token Space: Discriminative Adaptation of SpeechLLMs for Emotion Recognition

关键事实

  • 提出判别式适应方法,通过分类头读取隐藏状态进行情感识别,不修改主干网络。[1]

  • 在IEMOCAP数据集上提升了Macro F1分数并消除了幻觉,在真实ASR转录文本上收益最大。[1]

  • 该方法使用单一线性层作为分类头,将情感转化为LLM输出token空间中的方向。[1]

相关 · 论文

本页内容由 AI 自动聚合公开信源生成,仅供了解行业动态参考,不构成任何投资或决策建议。如需引用请以原文出处为准。