spark 用伪分布式部署 worker 只能启动一个吗？

Question

如题，用单机伪分布式部署，配置了 slave 信息启动后只有一个 worker，slave 也是配的本机，有办法启动多个 worker 吗？

Answer 1

在 spark/conf/spark-env.sh 里面配置环境变量 SPARK_WORKER_INSTANCES=4 就是启动 4 个 worker，详见文档：https://spark.apache.org/docs...