Python 深度学习AI - 声音克隆、声音模仿、模拟特朗普声音唱《See You Again》,Real-Time-Voice-Cloning项目的安装与使用

简介: Python 深度学习AI - 声音克隆、声音模仿、模拟特朗普声音唱《See You Again》,Real-Time-Voice-Cloning项目的安装与使用

     

Python 深度学习AI - 声音克隆、声音模拟

第一章:环境准备与安装

① Real-Time-Voice-Cloning 项目源码下载

获取地址:

github 官方

小蓝枣的 csdn 资源仓库

image.png

② requirments 必要库安装

image.png

清单如下:

umap-learn

visdom

librosa>=0.8.0

matplotlib>=3.3.0

numpy==1.19.3; platform_system == “Windows”

numpy==1.19.4; platform_system != “Windows”

scipy>=1.0.0

tqdm

sounddevice

SoundFile

Unidecode

inflect

PyQt5

multiprocess

numba

webrtcvad; platform_system != “Windows”

使用命令 pip install -r requirements.txt 进行安装。

image.png

③ TensorFlow 安装

TensorFlow 官方网站

image.png

image.png

④ PyTorch 安装

PyTorch 官方网站

image.png

安装命令:pip install torch==1.8.0+cpu torchvision==0.9.0+cpu torchaudio==0.8.0 -f https://download.pytorch.org/whl/torch_stable.html

image.png

⑤ FFmpeg 下载环境变量配置

github 官方

image.png

环境变量配置:

image.png

image.png

image.png

⑥ 下载训练包

获取地址:

github 官方image.png

image.png

将训练包直接解压到项目根目录下。

image.png

第二章:效果测试

① 命令行合成音频测试:输入音频源和文本,合成目标

由于官方提供的训练库是英文版的,所以如果音频源是中文,或者合成中文内容效果不是很好,大家有兴趣的可以找一些中文训练包来进行测试。

image.png

image.png

image.png

这是项目里给的声音源示例,可以用这个来进行测试。

image.png

合成后的音频文件。

image.png

② 工具箱合成音频测试,工具箱的使用方法介绍

image.png

分析后黑色部分合成的不是很好,可以重新再分析一下,每次分析的效果都是不一样的。

image.png

③ 特朗普声音克隆,模拟特朗普讲话,特朗普唱《See You Again》

特朗普音频资源获取:

小蓝枣的 csdn 资源仓库

这是歌曲 《We Cant’t Stop》,合成的效果还不错,有的歌涉及断句的,给它加个回车断一下效果会更好,有层次感。

image.png

这是歌曲 《See You Again》,合成的效果也还行。

image.png

喜欢的点个赞❤吧!

目录
相关文章
|
2天前
|
人工智能 Python
【AI大模型应用开发】【LangChain系列】实战案例1:用LangChain写Python代码并执行来生成答案
【AI大模型应用开发】【LangChain系列】实战案例1:用LangChain写Python代码并执行来生成答案
7 0
|
机器学习/深度学习 数据可视化 定位技术
Python 深度学习第二版(GPT 重译)(四)(4)
Python 深度学习第二版(GPT 重译)(四)
15 3
|
机器学习/深度学习 算法 算法框架/工具
Python 深度学习第二版(GPT 重译)(四)(2)
Python 深度学习第二版(GPT 重译)(四)
26 2
|
机器学习/深度学习 存储 计算机视觉
Python 深度学习第二版(GPT 重译)(四)(1)
Python 深度学习第二版(GPT 重译)(四)
23 3
|
机器学习/深度学习 API 算法框架/工具
Python 深度学习第二版(GPT 重译)(三)(3)
Python 深度学习第二版(GPT 重译)(三)
19 2
|
机器学习/深度学习 监控 算法框架/工具
Python 深度学习第二版(GPT 重译)(三)(2)
Python 深度学习第二版(GPT 重译)(三)
33 1
|
机器学习/深度学习 TensorFlow API
Python 深度学习第二版(GPT 重译)(一)(4)
Python 深度学习第二版(GPT 重译)(一)
27 3
|
3天前
|
机器学习/深度学习 存储 边缘计算
深度学习在图像识别中的应用与挑战
【4月更文挑战第23天】 随着人工智能技术的飞速发展,深度学习作为其重要分支之一,在图像识别领域取得了显著的成果。本文将探讨深度学习在图像识别中的应用,分析其优势和面临的挑战,并展望未来的发展趋势。
|
2天前
|
机器学习/深度学习 安全 计算机视觉
深度学习在图像识别中的应用与挑战
【4月更文挑战第24天】 随着计算机视觉技术的飞速发展,深度学习已成为推动图像识别领域进步的核心动力。本文旨在探讨深度学习技术在图像识别中的关键应用,并分析当前面临的主要挑战。通过回顾卷积神经网络(CNN)的基础架构及其在图像分类、目标检测和语义分割中的创新应用,文章揭示了深度学习模型如何优化视觉信息处理流程。同时,针对训练数据需求、计算资源限制、模型泛化能力及对抗性攻击等问题,本文提出了一系列解决策略和技术方向,为未来研究提供了参考框架。
6 0
|
2天前
|
机器学习/深度学习 传感器 自动驾驶
基于深度学习的图像识别技术在自动驾驶系统中的应用
【4月更文挑战第24天】 随着人工智能技术的飞速发展,深度学习在图像处理领域取得了显著成果,特别是在自动驾驶系统中的应用。本文首先介绍了深度学习的基本概念和关键技术,然后详细阐述了卷积神经网络(CNN)在图像识别中的优势和应用,最后探讨了深度学习在自动驾驶系统中的挑战和未来发展趋势。