PaddleMIX

PaddleMIX copied to clipboard

Llava static

1

LokeZhou

新增模型GPT-SoVITS

1

# 新增模型GPT-SoVITS模型 ## 任务描述 ### 任务背景 - GPT-SoVITS支持是语音合成（音色克隆） ### 完成步骤 1. 模型、代码已经开源。 2. 根据开源代码进行网络结构转换，训练、推理，[代码链接](https://github.com/RVC-Boss/GPT-SoVITS)。 3. 前向推理和训练跑通即可。 4. 提交代码PR到[PaddleMIX](https://github.com/PaddlePaddle/PaddleMIX/tree/develop)。 ### 提交内容： 1. 模型脚本提交到paddlemix/models。 2. 推理脚本提交到paddlemix/examples。

luyao-cv

文件不存在，下载地址变了吗？./unet_config.json/config.json does not exist.!

3


yangy996

WenmuZhou

🎁PaddleMIX 快乐开源活动表单

11

# PaddleMIX 快乐开源活动 旨在鼓励更多的开发者参与到飞桨大模型套件的开源建设中，帮助社区修复 bug 或贡献 feature，加入开源、共建飞桨。 ## 热身任务 跑通 Stable-Diffusion 的训练推理流程，通过完成本任务，可以收获对时下火热的文生图SD模型的hands on感受与理解，也可以快速上手PaddleMIX。本任务邮件通过验收后，即可获得精美的飞桨社区周边礼品，数量有限，先到先得~ mentor：@LokeZhou 参考链接：https://github.com/PaddlePaddle/PaddleMIX/issues/273 ## 命题任务 命题任务是我们总结整理大模型套件的需求得出，每个任务上标注了任务难度，大家可以选择参与。欢迎对这些需求感兴趣的开发者参与到这些任务的开发✌️✌️。在开发过程中，你能进行包括任务分解、代码撰写等工作，还会有飞桨的研发全程和你一起解决可能遇到的问题。还等什么，快来参与吧。🎉🎉 * 做任务流程： 1. 在本条Issue页面进行报名。 2. 完成任务后，在任务对应tracking issue页面回复完成，飞桨研发同学验收通过后即视作完成，并在当天更新任务完成状态。 * 任务列表 | 任务名称 |...

Harryoung

open-sora 推理复现

1

# 新增模型open-sora ## 任务描述 ### 任务背景 - open-sora是一个开源的文生视频模型，该任务只需复现前向推理流程即可。 ### 完成步骤 1. 模型、代码已经开源。 2. 根据开源代码进行网络结构转换，推理，[代码链接](https://github.com/hpcaitech/Open-Sora.git)。 3. 前向推理跑通对齐即可，可参考[inference](https://github.com/hpcaitech/Open-Sora/tree/main?tab=readme-ov-file#inference)。 4. 提交代码PR到[PaddleMIX](https://github.com/PaddlePaddle/PaddleMIX/tree/develop)。 参考PR：https://github.com/PaddlePaddle/PaddleMIX/pull/401 ### 提交内容： 1. 提交代码到[目录](https://github.com/PaddlePaddle/PaddleMIX/tree/develop/ppdiffusers/examples)

LokeZhou

add magvitv2 trainer

1

LokeZhou

wav2lip用自己的数据集训练！4090训练了两天，生成的视频和原视频一样，嘴型没有任何变化！可能是什么原因？ 还有！我想知道啊 真的不用重新训练SyncNet嘴型判别器？

drakitLiu

Automatic labeling for video

2

Is it possible to use this workflow for the video mp4 instead of a single image. ? and keep the bounding boxes and labels save for that file as json?

Tortoise17

StableDiffusionXLControlNetPipeline如何加载本地权重？

dddlli