当前位置：首页 > news >正文

语言合成模型Spark-TTS-0.5B学习笔记

news 来源：原创 2025/4/30 15:20:12

语言合成模型Spark-TTS-0.5B学习笔记

语言合成是通过计算机技术将文字信息转换为自然流畅的语音输出，模拟人类语音。

一、下载Spark-TTS-0.5B项目

下载链接： https://github.com/SparkAudio/Spark-TTS.git
注：需要科学网络。

进入Spark-TTS文件夹，启动命令行窗口。

创建 Conda 环境：

conda create -n sparktts -y python=3.12

激活虚拟环境

conda activate sparktts

安装依赖

pip install -r requirements.txt -i https://mirrors.aliyun.com/pypi/simple/ --trusted-host=mirrors.aliyun.com

在这里插入图片描述

显示一个报错

ERROR: pip's dependency resolver does not currently take into account all the packages that are installed. This behaviour is the source of the following dependency conflicts.
numba 0.61.0 requires numpy<2.2,>=1.24, but you have numpy 2.2.3 which is incompatible.

这是numpy版本不兼容的问题，强制安装兼容版本即可。

二、预训练模型下载

git指令下载

mkdir -p pretrained_models

# Make sure you have git-lfs installed (https://git-lfs.com)
git lfs install

git clone https://huggingface.co/SparkAudio/Spark-TTS-0.5B pretrained_models/Spark-TTS-0.5B

三、启用脚本实现语音克隆

语音克隆：根据参考声音和指定文本，生成参考声音的说话声音（内容为指定文本）。

cd example
bash infer.sh

这里的example就是项目中的example目录。
infer.sh是一个脚本。

可以通过修改脚本内的内容，来修改参考声音、指定文本、模型等等。
打开infer.sh，以下为infer.sh内容：

# Get the absolute path of the script's directory
script_dir=$(dirname "$(realpath "$0")")

# Get the root directory
root_dir=$(dirname "$script_dir")

# Set default parameters
device=0
save_dir='example/results'
model_dir="pretrained_models/Spark-TTS-0.5B"
text="身临其境，换新体验。塑造开源语音合成新范式，让智能语音更自然。"
prompt_text="吃燕窝就选燕之屋，本节目由26年专注高品质燕窝的燕之屋冠名播出。豆奶牛奶换着喝，营养更均衡，本节目由豆本豆豆奶特约播出。"
prompt_speech_path="example/prompt_audio.wav"

# Change directory to the root directory
cd "$root_dir" || exit

source sparktts/utils/parse_options.sh

# Run inference
python -m cli.inference \
    --text "${text}" \
    --device "${device}" \
    --save_dir "${save_dir}" \
    --model_dir "${model_dir}" \
    --prompt_text "${prompt_text}" \
    --prompt_speech_path "${prompt_speech_path}"