Do-tech-ai comments

Repositories
Issues
Comments

Results 2 comments of


                                            Do-tech-ai

拆分数据集不够精细

> 可以尝试配置自定义分隔符，或者尝试可视化自定义分块 https://docs.easy-dataset.com/jin-jie-shi-yong/editor 感谢解惑，问题已经得到改善

我是写了个脚本，把杂乱的数据，清洗成预训练，然后根据换行符，或者你在文本里面自定义一个符号进行拆分 ---原始邮件--- 发件人: ***@***.***> 发送时间: 2025年6月20日(周五) 中午11:53 收件人: ***@***.***>; 抄送: ***@***.******@***.***>; 主题: Re: [ConardLi/easy-dataset] 拆分数据集不够精细 (Issue #409) jwen6118 left a comment (ConardLi/easy-dataset#409) 可以尝试配置自定义分隔符，或者尝试可视化自定义分块 https://docs.easy-dataset.com/jin-jie-shi-yong/editor 感谢解惑，问题已经得到改善怎么设置的？我试了多种方式都不行 — Reply to this...