alphagen 内存占用过高，运行时间过长问题

想知道用cpu和GPU运行一次各需要多少时间。如果要复现KDD那篇论文，10次随机种子实验，因子池大小取【10,20,50,100】，多进程跑起来内存根本不够，想知道如何解决这个问题，望解答，十分感谢！

Dec 17 '23 06:12 yujunpeng2k

求解答

Dec 20 '23 01:12 yujunpeng2k

gpu单次实验大概5~10h？算力和内存就只能自行解决了 #35

Dec 26 '23 03:12 xuehongyanL

为什么我P400的显卡，跑100的股票池，30Wstep，一个种子就得跑二十多个小时。。

Jan 03 '24 07:01 yujunpeng2k

多进程占用同一张卡确实可能会拖慢计算，GPU资源调度比较费劲。另外现在版本的 Rank IC 计算确实优化比较拉，像 #35 需要跑大数据集的话会在那块爆显存。我最近针对这个优化过，可能过一阵子有空会更新一下。

Jan 03 '24 08:01 Chlorie

OK，期待更新

---- 回复的原邮件 ---- | 发件人 | @.> | | 日期 | 2024年01月03日 16:39 | | 收件人 | @.> | | 抄送至 | @.>@.> | | 主题 | Re: [RL-MLDM/alphagen] 内存占用过高，运行时间过长问题 (Issue #39) |

多进程占用同一张卡确实可能会拖慢计算，GPU资源调度比较费劲。另外现在版本的 Rank IC 计算确实优化比较拉，像 #35 需要跑大数据集的话会在那块爆显存。我最近针对这个优化过，可能过一阵子有空会更新一下。

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

Jan 03 '24 08:01 yujunpeng2k

多进程占用同一张卡确实可能会拖慢计算，GPU资源调度比较费劲。另外现在版本的 Rank IC 计算确实优化比较拉，像 #35 需要跑大数据集的话会在那块爆显存。我最近针对这个优化过，可能过一阵子有空会更新一下。

请问有更新的版本了吗

Dec 09 '24 08:12 smallgamerun

alphagen alphagen copied to clipboard