我正在尝试在Azure Databricks中使用Apache Spark / Ignite集成。我使用Databricks UI安装了org.apache.ignite：ignite-spark-2.4：2.9.0 Maven库。而且在访问我的点火开关时出现错误：

: java.lang.NoSuchMethodError: org.springframework.util.ReflectionUtils.clearCache()V
        at org.springframework.context.support.AbstractApplicationContext.resetCommonCaches(AbstractApplicationContext.java:907)
        at org.springframework.context.support.AbstractApplicationContext.refresh(AbstractApplicationContext.java:567)

这里AbstractApplicationContext是用ReflectionUtils不同的spring版本编译的。

我看到在org.apache.ignite：ignite-spark-2.4：2.9.0安装过程中在/ dbfs / FileStore / jars / maven / org / springframework中安装了spring-core-4.3.26.RELEASE.jar并在那里/ dbfs / FileStore / jars下没有其他 Spring 版本的jar

但是似乎数据块内部使用了spring-core__4.1.4。

%sh
ls /databricks/jars | grep spring

印刷：

spark--maven-trees--spark_2.4--com.clearspring.analytics--stream--com.clearspring.analytics__stream__2.7.0.jar
spark--maven-trees--spark_2.4--org.springframework--spring-core--org.springframework__spring-core__4.1.4.RELEASE.jar
spark--maven-trees--spark_2.4--org.springframework--spring-test--org.springframework__spring-test__4.1.4.RELEASE.jar

我不是Java程序员，所以我没有解决此类冲突的经验。

是否有可能以某种方式调整databricks类路径或以其他方式解决此问题？

调整类路径可能很容易，但是我不知道如何。我只是在databricks文档中看到一句话，它可以更改init-script中的类路径。我可以创建一个init脚本，之前已经做过，但是我到底应该怎么做？

我尝试了不同的databricks运行时版本，目前尝试使用6.6。我认为Apache Ignite与spark 3没有集成。