该方案如下:
我试图通过 Spark 读取它来从EMR计算s3位置文件的记录计数。
这是我遇到的错误:
调用o67.load时:java.lang.NoClassDefFoundError:org / apache / hadoop / fs / staging / StagingDirectoryCapable。
该错误是间歇性的,有时会出现,并且有时会正常工作。
使用的Emr版本-5.29.0
最佳答案
那必须是EMR专有的类/接口(interface);它不在ASF代码库中。也许有类路径问题