如何让spark集群外部package文件缓存到每台集群机器本地？

Question

spark集群初学者。我在用pyspark --packages安装外部库后，每次启动一个app后slave的executor都向master机下载包文件，导致任务在slave机器上运行得非常慢，slave机器的executor会经常出现如下日志内容：

2019-05-23 21:14:56 INFO  Executor:54 - Fetching spark://Master:2653/files/com.microsoft.cntk_cntk-2.4.jar with timestamp 1558616430055
2019-05-23 21:14:56 INFO  TransportClientFactory:267 - Successfully created connection to Master/192.168.100.2:2653 after 23 ms (0 ms spent in bootstraps)
2019-05-23 21:14:56 INFO  Utils:54 - Fetching spark://Master:2653/files/com.microsoft.cntk_cntk-2.4.jar to /tmp/spark-0a60d982-0082-4d37-aea1-e1c0b21ee2be/executor-c9632fd2-29fc-429c-bdfb-31d870ed19e8/spark-15805ad8-ab00-41b3-b466-b0e8e95a3f56/fetchFileTemp5196357990337888981.tmp

有什么方法可以让集群去下载机器本地的指定位置的库文件呢？谢谢大家！