weekly icon indicating copy to clipboard operation
weekly copied to clipboard

【开源自荐】Hybrid-Net: 实时音源分离,针对音乐生成歌词、和弦、节奏、曲谱

Open liufeigit opened this issue 11 months ago • 1 comments

开源地址 https://github.com/DoMusic/Hybrid-Net

功能说明 这是一个以音乐为主题的人工智能多模态项目,可为任何歌曲生成和弦、节拍、歌词、旋律和标签,基于transformer的混合多模态模型,各种transformer模型解决了mir领域的不同问题,这些模型产生了相应的信息依赖关系,相互影响。

模型结构

model

用于音源分离的 U-Net 网络模型、基于transformer模型的 Pitch-Net、Beat-Net、Chord-Net 和 Segment-Net,除了建立频率和时间之间的相关性,最重要的是建立不同网络之间的相互影响关系,以达到更好的训练效果

在线体验 https://lamucal.ai/

liufeigit avatar Mar 27 '24 06:03 liufeigit

项目中看起来是只开源了网络结构,并没有开源权重,请问后续有计划开源权重么?

hihei avatar Mar 28 '24 08:03 hihei