闪亮水滴项目运行问题

我从’https://github.com/h2oai/h2o-droplets/tree/master/sparkling-water-droplet‘克隆了闪亮水滴项目。并分别使用./gradlew clean./gradlew build清理并构建了项目。之后尝试使用以下命令运行项目
spark-submit –class water.droplets.SparklingWaterDroplet build/libs/sparkling-water-droplet-app.jar
然后得到了以下错误消息:

Exception in thread "main" java.lang.NoClassDefFoundError: water/fvec/Frameat water.droplets.SparklingWaterDroplet.main(SparklingWaterDroplet.scala)at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)at sun.reflect.DelegatingMethodAccessorImp.invoke(DelegatingMethodAccessorImp.java:43)at java.lang.reflect.Method.invoke(Method.java:497)at org.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:674)at org.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:180)at org.apache.spark.deploy.SparkSubmit$.submit(SparkSubmit.scala:205)at org.apache.spark.deploy.SparkSubmit$.main(SparkSubmit.scala:120)at org.apache.spark.deploy.SparkSubmit.main(SparkSubmit.scala)Caused by: java.lang.ClassNotFoundException: water.fvec.Frameat java.net.URLClassLoader.findClass(URLClassLoader.java:381)at java.lang.ClassLoader.loadClass(ClassLoader.java:424)at java.lang.ClassLoader.loadClass(ClassLoader.java:357)... 10 more

回答:

您需要运行./gradlew shadowJar,并使用它创建的jar文件build/libs/sparkling-water-droplet-app.jar,因为它会创建一个包含所有所需类的胖jar文件,而build任务并不会这样做。

Related Posts

L1-L2正则化的不同系数

我想对网络的权重同时应用L1和L2正则化。然而,我找不…

使用scikit-learn的无监督方法将列表分类成不同组别,有没有办法?

我有一系列实例,每个实例都有一份列表,代表它所遵循的不…

f1_score metric in lightgbm

我想使用自定义指标f1_score来训练一个lgb模型…

通过相关系数矩阵进行特征选择

我在测试不同的算法时,如逻辑回归、高斯朴素贝叶斯、随机…

可以将机器学习库用于流式输入和输出吗?

已关闭。此问题需要更加聚焦。目前不接受回答。 想要改进…

在TensorFlow中,queue.dequeue_up_to()方法的用途是什么?

我对这个方法感到非常困惑,特别是当我发现这个令人费解的…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注