zhangfan-algo
zhangfan-algo
哦哦好滴 输入是 img+text 输出是 text 这个要怎么设置一下数据集格式呀
> ## 数据格式 > 我们的数据采用了JSONL(JSON Lines)格式。JSONL是一种文本格式,每行都是一个独立的JSON对象。每个JSON对象表示一个数据示例,其中包含了对话内容以及相关的元数据。 > > ## 数据结构 > 每个数据示例都包含以下字段: > > * `"id"`: 数据示例的唯一标识符。 > * `"image"`: 图像文件的路径。 > * `"conversations"`: 对话内容列表,包含了交替的用户(human)和模型(gpt)对话。 > > 对话内容列表中的每个对话对象包含以下字段: > >...
大佬 lora微调完后合并的脚本有吗
也同样会遇到类似的问题
我也发现了 回退到原来版本了
辛苦尽快支持一下呀 获取 Outlook for iOS ________________________________ 发件人: tastelikefeet ***@***.***> 发送时间: Wednesday, February 28, 2024 2:37:54 PM 收件人: modelscope/swift ***@***.***> 抄送: zhangfan-algo ***@***.***>; Author ***@***.***> 主题: Re: [modelscope/swift] 可以支持一下SPIN自我博弈微调的方法不 (Issue #466)...
感谢大家 帮忙顶起来兄弟们
还有微调方式可否加入p-tuing方式支持一下呀,之前试过p tuing v2 ,感觉效果还可以
微调完之后需要合并权重吗,刚刚训练sft有checkpoint但是合并权重的代码貌似没有找到
想问下 lora 微调中 lora target 可以的参数有哪些呢 微调chatglm2