data-juicer
data-juicer copied to clipboard
在ray模式下trace不能正常工作
Before Asking 在提问之前
-
[x] I have read the README carefully. 我已经仔细阅读了 README 上的操作指引。
-
[x] I have pulled the latest code of main branch to run again and the problem still existed. 我已经拉取了主分支上最新的代码,重新运行之后,问题仍不能解决。
Search before asking 先搜索,再提问
- [x] I have searched the Data-Juicer issues and found no similar questions. 我已经在 issue列表 中搜索但是没有发现类似的问题。
Question
在executor type是ray的情况下,即使设置了open_tracer为true以及相应的trace_num,输出文件夹下也没有trace的子文件夹。只改变executor type为default,config中其它设置完全不变,trace可以正常工作。
另外,executor type是ray的情况下,工作日志中找不到诸如每一个算子filter掉了多少样本之类的信息。
Additional 额外信息
No response