schhaohao

何时可以解耦lora模型和base模型

1

### Feature request / 功能建议 解耦lora模型和base模型，单独保存和加载lo ra模型，就像diffusers中 ### Motivation / 动机 1 ### Your contribution / 您的贡献 1

### System Info / 系統信息 我认为用图片训练t2v是一个很有意义的事情，上周都说要做的。还有机会开源吗 ### Information / 问题信息 - [ ] The official example scripts / 官方的示例脚本 - [ ] My own modified scripts / 我自己修改的脚本和任务 ### Reproduction...

CogVideo是可以使用图片训练的，请问如何使用图片进行训练

3

### System Info / 系統信息  文中指出使用图片和视频进行联合训练，那么如何使用图片进行训练，需要修改脚本我哪些地方，我想使用图片进行训练 ### Information / 问题信息 - [X] The official example scripts / 官方的示例脚本 - [ ] My own modified scripts / 我自己修改的脚本和任务 ### Reproduction...

### System Info / 系統信息  ### Information / 问题信息 - [ ] The official example scripts / 官方的示例脚本 - [ ] My own modified scripts / 我自己修改的脚本和任务 ### Reproduction...

load_cogvideo_lora.py加载lora和sat中的inference.sh是有什么gap吗。为什么sat推的没问题，load_cogvideo_lora.py推理的直接崩掉了

1

### System Info / 系統信息 1 ### Information / 问题信息 - [ ] The official example scripts / 官方的示例脚本 - [ ] My own modified scripts / 我自己修改的脚本和任务 ### Reproduction...

DreamVideo推理视频生成全是噪声

1

您好，我有两个问题： 1、readme中只说了要下载dreamvideo的模型，但是还需要两个模型，一个是open_clip_pytorch_model.bin,另一个是v2-1_512-ema-pruned.ckpt，readme中并没有指明这两个模型要下载那个，open_clip_pytorch_model.bin我下载的是iic/text-to-video-synthesis下的open_clip_pytorch_model.bin；v2-1_512-ema-pruned.ckpt我下载的是stabilityai/stable-diffusion-2-1-base下的v2-1_512-ema-pruned.ckpt，请问是否正确？ 2、按照readme中教程python inference.py --cfg configs/dreamvideo/infer/examples/joint_dog2_carTurn.yaml 生成的两个视频如下 https://github.com/user-attachments/assets/fa11f41a-e2ff-4c71-83da-7a3ba8023cf9 https://github.com/user-attachments/assets/02ceda57-0bc2-4a10-8a6b-0183a9e71160 python inference.py --cfg configs/dreamvideo/infer/examples/joint_dog2_playingGuitar.yaml生成的3个视频如下 https://github.com/user-attachments/assets/041ec702-32f0-4250-9dd4-07c5925fa454 https://github.com/user-attachments/assets/1f8dab25-56ae-480b-a5e7-acf9c6a3753e https://github.com/user-attachments/assets/5ee63486-8fec-4fa7-b4e1-092ebd6251cc 请问这是怎么回事，期待您的回复

[2025-06-17 02:20:17] Resume from checkpoint /home/24031212058/modelhub/hunyuan-v1-2-distilled/pytorch_model_distill.pt [rank0]: Traceback (most recent call last): [rank0]: File "/home/24031212058/HunyuanDiT/hydit/train_deepspeed.py", line 691, in [rank0]: main(get_args()) [rank0]: File "/home/24031212058/HunyuanDiT/hydit/train_deepspeed.py", line 448, in main [rank0]: model, ema,...