OpenSourceTalent icon indicating copy to clipboard operation
OpenSourceTalent copied to clipboard

2024腾讯犀牛鸟开源人才培养计划—HunyuanDiT

Open tencent-adm opened this issue 1 year ago • 3 comments

腾讯犀牛鸟开源人才培养计划

欢迎广大高校学子加入2024腾讯犀牛鸟开源人才培养计划!腾讯犀牛鸟开源人才培养计划面向全国高校学生发布实践及研学项目,由教育部计算机类专业教学指导委员会、教育部软件工程专业教学指导委员会、教育部电子信息类专业教学指导委员会作为联合指导单位,腾讯开源和腾讯高校合作联合主办,表现优异的高校学生将有机会获得腾讯颁发的荣誉证书、现金奖励以及腾讯特色礼包。

期待同学们在本次研学旅程中,和腾讯一起探索未知、学习技术,让开源伴你成长,收获满满一夏!

更多项目信息请看:腾讯开源活动官网腾讯开源研学基地

项目简介

我们提出了混元DiT,一个基于Diffusion transformer的文本到图像生成模型,此模型具有中英文细粒度理解能力。为了构建混元DiT,我们精心设计了Transformer结构、文本编码器和位置编码。我们构建了完整的数据管道,用于更新和评估数据,为模型优化迭代提供帮助。为了实现细粒度的文本理解,我们训练了多模态大语言模型来优化图像的文本描述。最终,混元DiT能够与用户进行多轮对话,根据上下文生成并完善图像。目前已对外开放技术报告、工程代码、加速框架、插件生态、基础模型&标签模型等。

项目导师

qinglinlu 腾讯高级算法总监 zhiminli 腾讯高级算法研究员 jarvizhang 腾讯高级算法研究员

导师寄语

我非常高兴地向大家介绍我们的项目——混元DiT,这是一个基于Diffusion transformer的文本到图像生成模型,具有中英文细粒度理解能力。这个项目不仅能够提供一种创新的文生图技术解决方案,而且能够为大家提供一个学习、交流和成长的平台。无论你是一个有经验的开发者,还是一个热衷于探索新技术的探索者,我都热烈欢迎你加入我们的项目。 让我们一起携手,共同推动混元DiT项目的发展,以我们的技术和热情,为开源社区和技术进步做出我们的贡献。 期待与你们在这个旅程中共同进步!

培养概览

1️⃣ 参与“腾讯开源基础课程” 完成考试可获得《腾讯开源研学结课证书》

2️⃣ 参与“腾讯开源issue实战” 完成任意issue即可获得专属《腾讯开源实战证书》+ 腾讯周边精美礼包一套。其中issue难度对应礼包大小

3️⃣ 参与“腾讯开源课题实战” 任务奖金从6K、8K到12K不等、腾讯犀牛鸟开源人才培养研学专属《优秀学生证书》、全球限量《腾讯开源贡献者证书》

如何贡献

参与“腾讯混元DiT issue实战”

进入“研学基地-issue营地”,选择发布方“混元DiT" Issue 任务,认领和完成它。腾讯混元DiT于7月2日正式开放 issue ,学生可无门槛参与和认领,欢迎共建共创!

  1. 如果你愿意解决issue,请在腾讯开源研学基地领取你感兴趣的混元DiT issue
  2. 请将混元DiT repo Fork 到你个人的仓库下
  3. 请参考验收标准,在个人仓库解决完对应的任务后,提交 PR 至混元DiT仓库
  4. PR提交后,项目导师将进行Code Review, PR 被合并后即视为任务完成
  5. 如有任何疑问,您可在研学基地报名后,加入本次混元导师微信群沟通,入群请备注”中文名&GitHubID“确认报名身份。导师将集中答疑 image

参与“腾讯开源课题实战”

时间安排:6月28日至7月28日为活动报名期,8月12日公布入围名单,8月12日至10月12日为课题实战期,通过筛选的学生即可参与此模块

开源课题实战 基于混元DiT的文生图项目优化

项目简介 我们的开源项目,是一个基于Diffusion transformer的文本到图像生成模型,它可以帮助大家更好地理解和应用业界最前沿的文生图大模型。我们希望通过这个课题实战,让更多的同学熟悉我们的代码,了解基于dit的文生图的原理以及算法工程的细节。最重要的是,我们希望通过你们的努力,能够极大地提升模型的易用性。

项目目标 我们希望从以下两个方面提升易用性:

算法优化:降低工程使用成本。我们希望可以提出新的算法/工程优化,可以进一步降低训练/推理所需显存,以及进一步提升训练/推理速度。包括但不限于蒸馏、量化、稀疏、LCM、hyper sd等加速策略。

工程优化:一键完成环境部署。我们希望可以在多种消费级显卡上进行部署,例如3090,4090,a6000,我们也希望能在windows/mac/ubuntu等平台一键部署,尽量降低工程的启动门槛。

联系导师

[email protected] [email protected] [email protected]

💁🏻‍♀️ 如有项目任何疑问,欢迎加入腾讯开源犀牛鸟官方QQ群859260607,期待你来!

tencent-adm avatar Jun 26 '24 03:06 tencent-adm

你好,腾讯团队:

我对“犀牛鸟开源人才发展计划”非常感兴趣。请问该项目是否对国际学生开放?由于我无法注册微信和QQ(可能是因为我的地区无法访问这些服务),所以暂时无法完成相关注册流程。希望您能帮忙解答或提供其他联系方式,非常感谢!

此致 敬礼!

Rahulsingh1939 avatar Jul 08 '25 22:07 Rahulsingh1939

已成功领取本issue

yzh189983 avatar Jul 10 '25 06:07 yzh189983

已成功领取本issue

gugu23456789 avatar Jul 10 '25 06:07 gugu23456789

已成功领取本issue

zhenwuyu2333 avatar Jul 10 '25 06:07 zhenwuyu2333

已成功领取本issue

KarryHzc avatar Jul 10 '25 06:07 KarryHzc

已成功认领issue

JoeZhu-CS avatar Jul 10 '25 06:07 JoeZhu-CS

已成功领取本issue

Erd-omg avatar Jul 10 '25 06:07 Erd-omg

已成功领取本issue

ilovexsir avatar Jul 10 '25 06:07 ilovexsir

收到

------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2025年7月10日(星期四) 下午2:13 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [Tencent/OpenSourceTalent] 2025腾讯犀牛鸟开源人才培养计划—腾讯混元大模型 (Issue #51)

Erd-omg left a comment (Tencent/OpenSourceTalent#51)

已成功领取本issue

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

KarryHzc avatar Jul 10 '25 06:07 KarryHzc

已成功领取本issue

YIHUI-First avatar Jul 10 '25 06:07 YIHUI-First

已成功领取本issue

libre977 avatar Jul 10 '25 06:07 libre977

已成功领取本issue

dahuiui1 avatar Jul 10 '25 06:07 dahuiui1

已成功领取本issue

LingmaFuture avatar Jul 10 '25 06:07 LingmaFuture

已成功领取本issue

ShuangMa156 avatar Jul 10 '25 07:07 ShuangMa156

已成功领取本issue

judy-cyber avatar Jul 10 '25 07:07 judy-cyber

已成功领取本issue

Liwenhao985 avatar Jul 10 '25 07:07 Liwenhao985

已成功领取本issue

Anna-khalil avatar Jul 10 '25 08:07 Anna-khalil

已成功领取本issue

ChengzhiQian avatar Jul 10 '25 10:07 ChengzhiQian

已成功领取本issue

WS-dhtc avatar Jul 12 '25 01:07 WS-dhtc

已成功领取本issue

202400130071 avatar Jul 14 '25 16:07 202400130071

已成功领取本issue

tangxxx121 avatar Jul 16 '25 13:07 tangxxx121

已成功领取本issue

SoarCld avatar Jul 18 '25 05:07 SoarCld

已成功领取本issue

Mr-Yang-lab844 avatar Jul 19 '25 02:07 Mr-Yang-lab844

已成功领取本issue,给我139 evaluation code 可以吗?官网流程有点不明白

Mr-Yang-lab844 avatar Jul 19 '25 02:07 Mr-Yang-lab844

已成功领取本issue

Yi-Zhong-0315 avatar Jul 20 '25 02:07 Yi-Zhong-0315

已成功领取本issue

songyiqun6 avatar Jul 20 '25 19:07 songyiqun6

已成功领取本issue

liangxg787 avatar Jul 27 '25 12:07 liangxg787

Confirm subscribe!

Mr-Yang-lab844 avatar Jul 27 '25 13:07 Mr-Yang-lab844

已成功领取本issue

leserein6 avatar Jul 29 '25 19:07 leserein6

已成功领取本issue

jhl25-pixel avatar Jul 31 '25 09:07 jhl25-pixel