THUMT
THUMT copied to clipboard
batch_size 10G GPU 单机最大能做到多少
这个值取决于模型大小以及GPU是否支持半精度。可以先设置一个值,然后观察训练时是否出现OOM,如有则继续调小。