来自 Hugging Face 的 Vaibhav Srivastav 最近在推特上发布了一条令人振奋的突破:Speech to Speech语音交互系统,可以极大地提升了人与机器之间的沟通效率与体验。 GitHub 链接:https://…
声浪
GPT-4o级开源语音交互系统发布,交互延迟仅0.5秒
27 0 0
弱监督音素预训练模型助力少数民族语言语音识别
论文地址:https://arxiv.org/abs/2407.13292 开源代码:https://github.com/thu-spmi/CAT/tree/master/egs/IuMien 摘 要 主流的自动语音识别(ASR,auto…
22 0 0
INTERSPEECH2024 | Vec-Tok-VC+: 双重训练策略下基于渐进式损失约束和残差增强的鲁棒零样本语音转换
零样本语音转换 (zero-shot voice conversion) 旨在保留语言内容的同时,将源说话人语音转换成任意目标说话人的语音。随着深度学习技术的引入,零样本语音转换技术取得了巨大的飞跃。但现有的零样本语音转换方法多在训练时进行…
62 0 0
论文分享 | 利用分层韵律建模实现富有表现力的零样本语音合成
基于大模型的语音合成展现出零样本音色克隆的巨大潜力。在大规模数据和大模型的双重作用下,如今的零样本语音合成可以轻松实现未见音色的克隆。然而当前的工作侧重于音色的泛化上,忽略了韵律建模,这使得合成语音的自然度和表现力有限。 近期,西工大音频语…
20 0 0
非Transformer架构站起来了!首个纯无注意力大模型,超越开源巨头Llama 3.1
来源丨机器之心 Mamba 架构的大模型又一次向 Transformer 发起了挑战。 Mamba 架构模型这次终于要「站」起来了?自 2023 年 12 月首次推出以来,Mamba 便成为了 Transformer 的强有力竞争对手。 此…
40 0 0
IEEE SPL丨Distil-DCCRN:利用特征知识蒸馏技术的小型DCCRN语音增强模型
DCCRN模型利用频谱复数特征实现了出色的语音增强性能。然而,该模型的参数量和计算复杂度高,难以直接在端侧设备部署。因此需要对模型进行优化,在不影响模型表现的同时,降低模型的参数量和计算复杂度。 最近,西北工业大学音频语音与语言处理研究组(…
37 0 0
