AI@NEWS

Kraken以低码率表征推进语音到语音翻译

用单层向量量化的低码率词元和双路径源条件,降低语音LLM预测负担。

推荐理由:方案把高码率声学预测拆成低码率语义特征与独立波形解码,并用双路径保留源语音条件;这有望缓解配对数据稀缺及音色韵律对齐难题。

阅读原文