/ 标签/ spark

# spark应用调试

7 min read

平常开发 spark 应用的时候,为了快速验证程序是否正确一般都会设置master为local模式来运行,但是如果想用集群环境来运行的话,就需要打一个 jar 包用spark-submit进行任务提交,但是在开发过程中频繁打 jar 包提交也是一件麻烦事,查阅相关资料之后发现其实可以在本地运行代码的时候指定集群环境来运行,达到快速调试的目的。

阅读