ChatTTS: un modelo de generación de voz que imita la voz de una persona real hablando (paquete de aceleración ChatTTS one-click)

Introducción general

ChatTTS 是一个专为对话场景设计的生成语音模型。它能够生成自然且富有表现力的语音，支持多种语言和多位说话者，适用于互动对话。该模型通过预测和控制细粒度的韵律特征，如笑声、停顿和插话，超越了大多数开源的语音合成模型。ChatTTS 提供预训练模型，支持进一步的研究和开发，主要用于学术目的。

Lista de funciones

• Soporte multilingüe：支持中文和英文，未来将扩展更多语言。
• Soporte para varios interlocutores：能够生成多位说话者的语音，适用于互动对话。
• 细粒度韵律控制：可以预测和控制笑声、停顿和插话等韵律特征。
• Modelo de preentrenamiento：提供40,000小时的预训练模型，支持进一步研究和开发。
• código abierto：代码在GitHub上开源，供学术和研究使用。

Utilizar la ayuda

Proceso de instalación

1. Clonación del código del proyecto::

   git clone https://github.com/2noise/ChatTTS.git
   

2. Instalación de dependencias::

   cd ChatTTS
   pip install -r requirements.txt
   

3. Descargar modelo preentrenado： 从HuggingFace或ModelScope下载预训练模型，并将其放置在指定目录。

Utilización

1. Modelos de carga::

   from chattts import ChatTTS
   model = ChatTTS.load_model('path/to/pretrained/model')
   

2. Generar discurso::

   text = "你好，欢迎使用ChatTTS！"
   audio = model.synthesize(text)
   

3. 保存音频文件::

   with open('output.wav', 'wb') as f:
   f.write(audio)
   

Funcionamiento detallado

• entrada de texto：支持中文和英文混杂的文本输入。
• 韵律控制：通过设置参数控制笑声、停顿和插话等韵律特征。
• 音色控制：可以通过预设的音色种子值或音色码控制生成的音色。
• control emocional：通过设置情感波动性和相关性参数，控制生成语音的情感特征。
• salida de streaming：支持长音频生成和分角色阅读，适用于复杂对话场景。

código de ejemplo (informática)

from chattts import ChatTTS
# 加载模型
model = ChatTTS.load_model('path/to/pretrained/model')
# 设置文本和韵律参数
text = "你好，欢迎使用ChatTTS！"
params = {
'laugh': True,
'pause': True,
'interjection': True
}
# 生成语音
audio = model.synthesize(text, params)
# 保存音频文件
with open('output.wav', 'wb') as f:
f.write(audio)

ChatTTS 客户端

快速体验

功能增强

Ampliación de funciones

ChatTTSPlus加速版一键安装包

ChatTTSPlus是ChatTTS的扩展版本，它在原有的基础上增加了TensorRT加速、语音克隆和移动端模型部署等功能。该项目使用方便，提供Windows一键安装包，并通过TensorRT实现了超过3倍的性能提升(在Windows 3060 GPU上，从28 tokens/s提升到110 tokens/s)。 它支持使用LoRA进行语音克隆，并正在开发模型压缩和加速技术以实现移动端部署。ChatTTSPlus是一个功能强大且易于使用的语音合成工具，适用于多种场景，尤其在需要高性能和语音克隆功能的应用中具有优势。

地址：https://github.com/warmshao/ChatTTSPlus