KubeFATE icon indicating copy to clipboard operation
KubeFATE copied to clipboard

Published 20 hours ago • verified publisher icon FederatedAI

fate1.10.0 上传数据集报错

Open ChrisBamaofan opened this issue 1 year ago • 6 comments

环境：使用kubefate ，照 fate-on-k8s安装fate 1.10.0 具体是 fate +spark+pulsar，且在一套k8s中安装了9999端和10000端 问题：在9999上传breast_hetero_guest时，报错，如图 image 服务都启动正常，且namenode有该路径

image

帮忙看下是哪里配置的问题

ChrisBamaofan avatar Apr 12 '23 04:04 ChrisBamaofan

@owlet42 通过接口绑定到hdfs的方式也失败了，fateflow报错如下 image

ChrisBamaofan avatar Apr 12 '23 07:04 ChrisBamaofan

在网上看到了通过pyarrow连 hadoop 3.x 的相同报错

ChrisBamaofan avatar Apr 12 '23 08:04 ChrisBamaofan

k8s集群网络插件是否正常，检查下hdfs的pod的IP都对不对

owlet42 avatar Apr 18 '23 04:04 owlet42

@ChrisBamaofan 请问你解决了吗？我遇到了同样的问题 image

FFinchR avatar May 06 '23 06:05 FFinchR

@ChrisBamaofan 请问你解决了吗？我遇到了同样的问题 image

没解决，后来用了localspark+localfs的方式部署

ChrisBamaofan avatar May 06 '23 06:05 ChrisBamaofan

没解决，后来用了localspark+localfs的方式部署

好的，感谢回复。

FFinchR avatar May 06 '23 07:05 FFinchR