内存占用过高，运行时间过长问题

[yujunpeng2k]

想知道用cpu和GPU运行一次各需要多少时间。如果要复现KDD那篇论文，10次随机种子实验，因子池大小取【10,20,50,100】，多进程跑起来内存根本不够，想知道如何解决这个问题，望解答，十分感谢！

[yujunpeng2k]

求解答

[xuehongyanL]

gpu单次实验大概5~10h？算力和内存就只能自行解决了
#35

[yujunpeng2k]

为什么我P400的显卡，跑100的股票池，30Wstep，一个种子就得跑二十多个小时。。

[Chlorie]

多进程占用同一张卡确实可能会拖慢计算，GPU资源调度比较费劲。
另外现在版本的 Rank IC 计算确实优化比较拉，像 #35 需要跑大数据集的话会在那块爆显存。我最近针对这个优化过，可能过一阵子有空会更新一下。

[yujunpeng2k]

OK，期待更新

…

---- 回复的原邮件 ---- | 发件人 | ***@***.***> | | 日期 | 2024年01月03日 16:39 | | 收件人 | ***@***.***> | | 抄送至 | ***@***.***>***@***.***> | | 主题 | Re: [RL-MLDM/alphagen] 内存占用过高，运行时间过长问题 (Issue #39) | 多进程占用同一张卡确实可能会拖慢计算，GPU资源调度比较费劲。 另外现在版本的 Rank IC 计算确实优化比较拉，像 #35 需要跑大数据集的话会在那块爆显存。我最近针对这个优化过，可能过一阵子有空会更新一下。 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: ***@***.***>