在 maven 仓库中我们发现 spark -core 提供scala 2.12 版本的jar包下载,但是官网并没有声明支持2.12,官网是支持2.11 的,但是有时候我们还是需要在spark-submit 上支持 2.12
scala,怎么做呢
其实很简单, 进入spark 的安装目录,在jars 目录中 你会看到spark 依赖的jar包,发现基本都是scala 2.11 版本,我们只要使用对应jar 包的2.12版本来替换就好,但是我个人建议,原来的jars包做好备份,另外替换成2.12 版本 可能不会很稳定需要不断尝试