Open-Sora 有人训练出结果吗

有人训练出结果吗

Open howardgriffin opened this issue 11 months ago • 6 comments

我用默认的设置，8卡训了两三天了，5w视频数据左右，但是现在一点视频的感觉都没有，都是patch状的拼接，是训练的不够吗，还是哪里出错了？

Mar 08 '24 02:03 howardgriffin

我跑的 "DiT-S/8"，用的默认训练脚本，训练了2/3个epoch的时候，sample的结果基本是随机

Mar 08 '24 03:03 jeffchy

可以show下你们的结果吗

Mar 08 '24 06:03 xinyuxiao

比较random 没啥意义，不过之前毕竟用了最小的模型，也只训练以一个epoch情有可原吧。我试试更大的模型以及其他参数再看吧。

Mar 08 '24 07:03 jeffchy

由于公司网络问题，不能上传大于100k的文件，直接从原视频里截了一个patch的图。实际的视频样子就是类似这种块状的无规则拼接

Mar 08 '24 08:03 howardgriffin

@howardgriffin 你好能问问你的训练设置以及看看你的训练曲线吗

Mar 09 '24 13:03 jeffchy

openai 五原则

大数据大算力大模型伸缩定律蒸馏

Mar 09 '24 13:03 yhyu13

openai 五原则

大数据

大算力

大模型

伸缩定律

蒸馏

伸缩定律、蒸馏怎么理解(๑•̌.•̑๑)ˀ̣ˀ̣

Mar 18 '24 02:03 baixiaolu

We have updated our model weights here.

Mar 18 '24 05:03 zhengzangw