Zhoukai Wang
Results
1
issues of
Zhoukai Wang
你好，在第三章中第三页的图中有一幅插图我不太理解。  图中stage1和stage2的任务是并发执行的吗？之前参考了http://dongxicheng.org/framework-on-yarn/apache-spark-multi-threads-model/ 这篇博客，得出多作业在spark中是可以并发执行的，然而图中stage1与stage2似乎也是并发关系，此外stage2中的两个lineage也是并发执行的吗？如果是，是不是表示在一个stage中的不同task也可以并发的执行？ 此外，如果多作业在spark中能够并发执行，那么前后的数据依赖关系怎么处理？（举个例子，现在的资源够图中3个stage同时开始运算，然而stage0的计算需要stage1和stage2的计算结果，那么stage0是否是先判断自己做计算所需的rdd不足，然后再等待stage1和stage2完成任务？而且stage0是怎么被激发的？是在stage1结束之后被激发的吗？） 初学spark，很多不理解，希望能解惑，非常感谢