Storm使用非java语言构建Bolt,Spout

来源：互联网发布：js 单选按钮改变事件编辑：程序博客网时间：2024/06/05 15:03

运行storm-starter的WordCount(使用python spout)可能会出现如下报错：

   java.lang.RuntimeException: Error when launching multilang subprocessat backtype.storm.task.ShellBolt.prepare(ShellBolt.java:105)  at backtype.storm.daemon.executor$fn__3493$fn__3505.invoke(executor.clj:689)  at backtype.storm.util$async_loop$fn__457.invoke(util.clj:431)   at clojure.lang.AFn.run(AFn.java:24)  at java.lang.Thread.run(Thread.java:722)    Caused by: java.io.IOException: Cannot run program "python" (in directory "storm- local\supervisor\stormdist\WordCount-1-1407303402\resources"): CreateProcess error=2, The system cannot find the file specified at java.lang.ProcessBuilder.start(ProcessBuilder.java:1029)at backtype.storm.utils.ShellProcess.launch(ShellProcess.java:50)  at backtype.storm.task.ShellBolt.prepare(ShellBolt.java:102)... 4 more    Caused by: java.io.IOException: CreateProcess error=2, The system cannot find the file specified      at java.lang.ProcessImpl.create(Native Method)     at java.lang.ProcessImpl.(ProcessImpl.java:189)      at java.lang.ProcessImpl.start(ProcessImpl.java:133)    at java.lang.ProcessBuilder.start(ProcessBuilder.java:1021)

或者报错找不到splitsentence.py。

原因和答案

大概意思就是非java语言跑不了本地模式，集群上就可以跑。
为了要调式，可将脚本打成jar包。

另外，非java暂时不能支持Trident，只能使用基本的Spout和Bolt。

0 0