跳到正文
热点事件观察中

EAVA:语音LLM域自适应微调新方法

1 篇报道1 个报道来源2 天前更新

先了解这件事

事件综述

Mohan Shi等研究者提出面向Speech-LLM语音识别的域自适应微调方法EAVA,用于在目标域数据有限的情况下适配儿童或方言等域偏移语音。该方法先在各编码器层插入轻量Adapter单独训练,再对LLM应用LoRA联合微调全模型。 在覆盖儿童与方言语音的三个域偏移ASR数据集上,EAVA持续优于常规微调及其他基线,取得新的最优性能。

根据报道生成 · 1 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. arXiv eess.AS
    通过 Adapter 唤醒编码器:Speech-LLM 的领域自适应微调方法 EAVA

    针对 Speech-LLM 在儿童或方言等域偏移语音上适应不足的问题,研究者提出领域自适应微调方法 EAVA:先在各编码器层插入轻量 Adapter 单独训练,再结合 LLM 上的 LoRA 联合微调全模型。在三个域偏移 ASR 数据集上,EAVA 持续优于常规微调及其他基线,取得新的最优性能。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。