GPT-SoVITS icon indicating copy to clipboard operation
GPT-SoVITS copied to clipboard

准确暂停训练

Open LuZixuan2022 opened this issue 5 months ago • 4 comments

众所周知,CPU训练速度特慢。 所以,我想请求一个功能: 现在,微调训练时可以今天先训练2轮,明天再训练2轮,一共4轮。 但有时一轮都要2小时,会让我的CPU持续高温运行,能否以Tokens为单位进行暂停?

我的训练速度:

SoVITS训练:

  1%|█▌                                                                                                                             | 11/887 [00:50<1:08:56,  4.72s/it]

GPT训练:

Epoch 0:  61%|██████████████████████████████▋                   | 544/886 [11:06<06:58,  0.82it/s, v_num=0, total_loss_step=332.0, lr_step=0.002, top_3_acc_step=0.405]

LuZixuan2022 avatar Sep 22 '24 03:09 LuZixuan2022