无法从Storm教程中运行风暴启动器拓扑

在遵循storm-starter repo中的指南时,我无法实际运行任何拓扑 – 如ExclamationTopology

mvn clean install -DskipTests=true成功运行,从顶级Storm repo执行,与storm-examples级别的mvn package

当我尝试运行storm jar target/storm-starter-2.0.0-SNAPSHOT.jar org.apache.storm.starter.ExclamationTopology ,我收到错误消息:

 Error: A JNI error has occurred, please check your installation and try again Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/storm/topology/IRichSpout 

我正在运行OS X,Java版本:

 java version "1.8.0_45" Java(TM) SE Runtime Environment (build 1.8.0_45-b14) Java HotSpot(TM) 64-Bit Server VM (build 25.45-b02, mixed mode) 

Maven版本3.3.9。

有没有人对我为什么会收到此错误以及我的设置中应该更改的内容有任何想法?

完整错误输出:

 Running: /Library/Java/JavaVirtualMachines/jdk1.8.0_45.jdk/Contents/Home/bin/java -client -Ddaemon.name= -Dstorm.options= -Dstorm.home=/Users/zachary/apache-storm-0.10.0 -Dstorm.log.dir=/Users/zachary/apache-storm-0.10.0/logs -Djava.library.path=/usr/local/lib:/opt/local/lib:/usr/lib -Dstorm.conf.file= -cp /Users/zachary/apache-storm-0.10.0/lib/asm-4.0.jar:/Users/zachary/apache-storm-0.10.0/lib/clojure-1.6.0.jar:/Users/zachary/apache-storm-0.10.0/lib/disruptor-2.10.4.jar:/Users/zachary/apache-storm-0.10.0/lib/hadoop-auth-2.4.0.jar:/Users/zachary/apache-storm-0.10.0/lib/kryo-2.21.jar:/Users/zachary/apache-storm-0.10.0/lib/log4j-api-2.1.jar:/Users/zachary/apache-storm-0.10.0/lib/log4j-core-2.1.jar:/Users/zachary/apache-storm-0.10.0/lib/log4j-over-slf4j-1.6.6.jar:/Users/zachary/apache-storm-0.10.0/lib/log4j-slf4j-impl-2.1.jar:/Users/zachary/apache-storm-0.10.0/lib/minlog-1.2.jar:/Users/zachary/apache-storm-0.10.0/lib/reflectasm-1.07-shaded.jar:/Users/zachary/apache-storm-0.10.0/lib/servlet-api-2.5.jar:/Users/zachary/apache-storm-0.10.0/lib/slf4j-api-1.7.7.jar:/Users/zachary/apache-storm-0.10.0/lib/storm-core-0.10.0.jar:target/storm-starter-2.0.0-SNAPSHOT.jar:/Users/zachary/apache-storm-0.10.0/conf:/Users/zachary/apache-storm-0.10.0/bin -Dstorm.jar=target/storm-starter-2.0.0-SNAPSHOT.jar org.apache.storm.starter.ExclamationTopology Error: A JNI error has occurred, please check your installation and try again Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/storm/topology/IRichSpout at java.lang.Class.getDeclaredMethods0(Native Method) at java.lang.Class.privateGetDeclaredMethods(Class.java:2701) at java.lang.Class.privateGetMethodRecursive(Class.java:3048) at java.lang.Class.getMethod0(Class.java:3018) at java.lang.Class.getMethod(Class.java:1784) at sun.launcher.LauncherHelper.validateMainClass(LauncherHelper.java:544) at sun.launcher.LauncherHelper.checkAndLoadMain(LauncherHelper.java:526) Caused by: java.lang.ClassNotFoundException: org.apache.storm.topology.IRichSpout at java.net.URLClassLoader.findClass(URLClassLoader.java:381) at java.lang.ClassLoader.loadClass(ClassLoader.java:424) at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:331) at java.lang.ClassLoader.loadClass(ClassLoader.java:357) ... 7 more 

编辑:

按照以下答案中的建议从pom.xml中删除scope行后,此错误消失了,但替换为:

Exception in thread "main" java.lang.ExceptionInInitializerError

 Caused by: java.lang.RuntimeException: java.io.IOException: Found multiple defaults.yaml resources. You're probably bundling the Storm jars with your topology jar. [jar:file:/Users/zachary/apache-storm-0.10.0/lib/storm-core-0.10.0.jar!/defaults.yaml, jar:file:/Users/zachary/storm/examples/storm-starter/target/storm-starter-2.0.0-SNAPSHOT.jar!/defaults.yaml] 

最终编辑

对于任何未来的Google员工,我最终没有通过LocalCluster上的命令行运行storm-starter示例。 我改为使用Maven建立一个新项目,将storm-core添加为依赖关系,遵循[this]( https://github.com/mbonaci/mbo-storm/wiki/Storm-setup-in-Eclipse-with-Maven ,-Git-and-GitHub )一般指南。 然后,在Eclipse中,我能够从storm导入正确的包来做示例,例如ExclamationTopology 。 我使用相同的导入重写了该类(更改为import backtype.storm.Config等)。 然后,正常运行该文件。

这个快速的 Maven指南也有帮助。

关于尼克的答案,要更准确一点。

storm-starter/pom.xml ,依赖storm-core指定范围为“provided”:

  org.apache.storm storm-core ${project.version}  ${provided.scope}  

如果使用LocalCluster在本地运行,则需要将storm-core作为依赖项包含在默认范围“compile”中,即只需删除scope标记,然后再次在storm-starter运行mvn -DskipTests package

关于Storm的NoClassDefFoundError通常是指来自pom.xml中标记的错误。

如果您尝试在安装了Storm的计算机集群上运行项目,则应该“提供”( provide ),否则如果您尝试在本地执行拓扑,范围必须设置为“编译”。

希望这可以帮助。

我第一次尝试运行风暴启动程序时,我被丢失的pom或某些依赖项阻止了。

我再次阅读该文件。 然后我发现我应该首先从项目的根目录而不是storm-starter目录安装风暴。

提供的范围应该没问题。 IDE将尝试从本地存储库中找到它