luoyeguigen001 issues

Repositories
Issues
Comments

Results 1 issues of


                                            luoyeguigen001

使用node2vec_randomwallk的结果测试 cluster/Word2vecExample.scala，OOM

测试cluster/cluster/Word2vecExample.scala，使用的数据是基于ogbn-100M的随机游走，该数据集大约有1.1亿个节点；游走的参数是：epoch=1, step=10，即每个节点随机游走一次，每次长度是10。使用master分支的代码，测试spark-on-angel下的cluster/cluster/Word2vecExample.scala，启动脚本如下： source ./bin/spark-on-angel-env.sh $SPARK_HOME/bin/spark-submit \ --master yarn-cluster\ --conf spark.ps.instances=6 \ --conf spark.ps.cores=4 \ --conf spark.ps.jars=$SONA_ANGEL_JARS \ --conf spark.ps.memory=10g \ --jars $SONA_SPARK_JARS \ --driver-memory 20g \ --num-executors...