在本地编译spark v3.2.1之后,我们在k8s中部署了它。我们在星火大师的下面观察到。任何解决这一异常的线索都是有帮助的。
2022-06-23 05:27:25.847 GMT ERROR [SPARK_MASTER] TransportRequestHandler: [rpc-server-4-1] Error while invoking RpcHandler#receive() for one-way message. java.io.InvalidClassException: org.apache.spark.deploy.ApplicationDescription; local class incompatible: stream classdesc serialVersionUID = 6543101073799644159, local class serialVersionUID = 1574364215946805297
发布于 2022-08-10 09:08:31
发现此异常是由于scala版本不兼容造成的。改造后,清理旧火花版本的形象,在构建机,帮助克服了这个问题。
https://stackoverflow.com/questions/72743160
复制相似问题