GPT-SoVITS icon indicating copy to clipboard operation
GPT-SoVITS copied to clipboard

GPT训练,3090ti训练都不够为什么?

Open yeloveyou opened this issue 1 year ago • 2 comments

image image gpt训练卡顿,并且进度条不显示,占用率100%,这是为什么呢?(我的训练文件就两个,合起来1分钟左右)

yeloveyou avatar Jan 29 '24 03:01 yeloveyou

打开cmd,输入 nvidia-smi 看看具体是哪些进程在占显存,我 batch_size=16 时SoVITS 约占 13.5G 显存,GPT 约占 14.5G 显存。 显存不够就等SoVITS训练完了再训练GPT。

BlacknoSheep avatar Jan 29 '24 13:01 BlacknoSheep

切片太长,共享显存占用严重

bfloat16 avatar Jan 30 '24 20:01 bfloat16

楼上正解。需要关闭共享显存。https://www.bilibili.com/read/cv27436189 参考这个,找到你调用的python.exe关闭一下。

RVC-Boss avatar Feb 08 '24 14:02 RVC-Boss