使用Java在独立模式下运行Spark

Question

我遇到了一个问题：我无法在AWS环境EMR中使用Java编写MapReduce Spark作业。 我有一个maser节点和5个奴隶。

让Spark运行java类的正确方法是什么？

我试过这个guide，但它对我不起作用。

谢谢！

Answer 1

亚马逊文档可能更适合EMR特定设置问题。 https://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/emr-spark-interactive-batch.html（特别是批量作业的https://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/emr-spark-submit-step.html）。