graph-learn

graph-learn copied to clipboard

相同参数情况下 分布式和单机训练模型精度出现差异

1

使用graphlearn v1.1.0中参考代码，将train_supervised的模型训练部分替换到dist_train的worker任务中测试分布式的监督学习任务。训练数据集选择使用ogbn-arxiv并在分布式训练时将点和边均分成两个文件，分布式训练集群配置为2PS-2Worker，其余代码和模型超参保持不变。结果分布式训练的loss下降到1.6左右开始震荡（单机能下降至1左右），请问这种情况如何解决。

LucasTsui0725

参考tutorial中进行dist.yaml的分布式训练时，worker产生了Unimplemented和Unavailable的报错

4


LucasTsui0725

dgs部署失败

1

我通过如下命令部署dgs服务  但是通过查看服务相关的pod，发现pod中文件缺失，请问该如何解决该问题 

doingGod

macOS seems to be supported according to https://github.com/alibaba/graph-learn/pull/208. However, the preexisting installation guide only works for Debian-based systems. Are you going to include make a build guide for macOS?

SYQQX

About quick start issue

1

When I run ./run_dist_server_mode_fs_tracker.sh to test, result is shown below: Client 0 started. [2022-12-04 17:22:05.842047] Server started. [2022-12-04 17:22:05.842530] Server started. Client 1 started. Client 2 started. Then it will...

YijianLiu

是否支持pyspark数据格式的输入？

1

大佬们，想问一下，想用GL构图采样，可以直接传入pyspark的数据dataframe之类的格式直接初始化么？还是必须传入数据地址？

chenheng98

graph-learn是否后期会和graphscope的图数据整合？

2

目前graph-learn的g对象和graphscope的g对象是不同的，GLE作为graphscope的未来规划能力之一，未来是否会贯通两者的图数据对象。

4613

GLE添加java版dataloader sdk

4

1.目前GLE的dgs dataloader仅有c++版sdk，是否后续会添加java版sdk？ 2.目前dgs的部署根据不同的schema和采样方式似乎需要部署不同实例，是否后续会开发动态启动dgs实例或者不同schema或采样可以共用一个。

4613

https://graph-learn.readthedocs.io/zh-cn/latest/zh_CN/gl/graph/graph_object.html#id8:~:text=%E8%A7%92%E8%89%B2%E6%84%9F%E7%9F%A5%E6%89%80%E6%9C%89GraphLearn%20Server%E7%9A%84hosts%EF%BC%8C%E5%90%8C%E6%AD%A5%E7%9A%84%E6%96%B9%E5%BC%8F%E6%94%AF%E6%8C%81%E4%B8%A4%E7%A7%8D%EF%BC%9A%E5%9F%BA%E4%BA%8E%E6%96%87%E4%BB%B6%E7%B3%BB%E7%BB%9F%E7%9A%84%E5%90%8C%E6%AD%A5%E5%92%8C%E5%9F%BA%E4%BA%8E%E9%80%9A%E4%BF%A1%E7%9A%84%E5%90%8C%E6%AD%A5%E3%80%82

yeshenyong

作为graphscope的训练引擎，本项目最近不太更新了，而graphlearn-for-pytorch还保持着比较频繁的更新，请问后续是把graphlearn-for-pytorch作为重点的训练引擎维护吗

wangmingzhiJohn