storm 提交任务为成功，但也不报错。

问题如下图所示，代码没有动过，问题尚未解决！

今天遇到个问题，启动Storm集群后，logs目录下没有任何日志，提交topology任务后，任务能够正常运行，但是还是没有任何worker日志。以为是配置错了。。疯狂的找配置对比。。。发现配置没问题。。。    最后看了一下，发现是因为我copy过来的这个storm安装目录下有以前的一个测试topology的jar包。。。。然后storm启动的时候把这些包一起当做lib一起加载了。然后就造成了

storm在用命令提交任务时，在work的日志里出现 找不到类 的错误，具体报错如下所示： 2017-12-10T15:55:42.615+0800 b.s.m.loader [INFO] Starting receive-thread: [stormId: Clustertopology-1-1512892537, port: 6700, thread-id: 0 ] 2017-12-10T1

问题描述   在本地eclipse运行是好好的，可是提交到集群上去之后什么都没反应。提交topology之后，在storm UI上看topology的worker数与在程序里设置的值是一样的，但是到对应的机器去查看的时候，发现那个worker并没有存在，在日志目录下也没有找到worker的日志，提交topology也并没有报什么错误提示，所以很茫然，此时倒是很希望它弄出一个错误出来好去定位问题，

[li@storm333 spark-standalone]$ ./bin/spark-submit --class com.atguigu.spark.test.spark_Jni_VectorAdd --master spark://storm333:7077 ./MyProjects/SparkJNIVectorAdd/spark-core-1.0-SNAPSHOT.jar 21/11/26 16:14:56 WARN NativeCodeLoader: Unable to load native.

一、Storm集群配置 搭建总体的架构： 实现步骤： 1.安装和配置jdk 2.安装和配置zookeeper 3.上传和解压storm 4.配置storm安装目录conf目录下的storm.yaml文件 storm.yaml配置示例： 找到storm.zookeeper.servers: 添加服务节点，如下： storm.zookeeper.servers: - “zkp1” - “zkp2” ...

搭建storm集群 系统centos7 1、安装Java jdk  1.7 2、安装zookeeper 3.4.8 3、安装Python2.7X 4、安装storm0.9 5、安装git 6、安装maven 所有安装包，等会我会打包上传，地址会放到最后，大家需要可以下载 1、安装jdk很简单 下载jdk压缩包 解压压缩包 ，我的安装目录是/software

写在前面:本篇博客主要介绍 storm 基本概念和一个简单实例,storm版本1.0.2storm基本概念storm的集群架构storm 是一个主从架构,一个主节点,n个从节点,主节点和从节点之间通过zk集群来进行交互, (这张图是盗的......)简述一下集群搭建:1,解压并且修改 storm.yaml,并且scp到其他节点机器上2,在主节点启动 nimbus服务,ui界面服务和logviewe...

最近storm的任务需要修改，我提交上strom集群去了，提示我提交成功了，但是任务没有执行，num worker和task等都为0。 首先我再提交之前的任务，也出现这个问题，那么说明问题出现在集群上面。 我看了一下ui那里的supervisor summary的slots有4个，used slots也是4个，这个slot就是worker，worker都占满了，当然任务没办法执行。 再看下s...

storm提交topology任务大概分为5个角色，一是：client，二是nimbus，三是zookeeper，四是supervisor，五是worker下面介绍每个角色在任务提交的时候所做的一些操作：1.client：提交topology2.nimbus：这个角色所做的操作相对较多，具体如下： a.会把提交的jar包放到nimbus所在服务器的nimbus/inbox目录下

发布topologies到远程集群时，出现Nimbus host is not set异常 原因是Nimbus没有被正确启动起来，可能是storm.yaml文件没有配置，或者配置有问题。 解决方法：打开storm.yaml文件正确配置：nimbus.host: “xxx.xxx.xxx.xxx”，重启nimbus后台程序即可。 发布topologies到远程集群时，出现AlreadyAliveE

Storm -- Distributed and fault-tolerant realtime computation 这是一个分布式的、容错的实时计算系统 把Storm依赖组件的版本贴出来供各位参考： java(1.7.0_45) python(2.6.6) zookeeper (zookeeper-3.4.5) zeromq(zeromq-2.1.7) jzmq(git...

6985 [main] INFO  o.a.s.l.AsyncLocalizer - Cleaning up unused topologies in /tmp/181f740f-15f5-4b53-987e-f41206245329/supervisor/stormdist 6989 [main] INFO  o.a.s.d.s.Supervisor - Starting supervisor

Storm工程中，使用Apache-kafka。之前使用kafka 0.8.2.1版本没有问题。更换为kafka 0.9.0.1之后，发现工程启动出现错误了。 Detected both log4j-over-flg4j.jar AND slf4j-log4j12.jar on the class path............ 解决方案： pom.xml配置文件中 做修改即可。 o

本人原帖地址：http://www.jianshu.com/p/6783f1ec2da0,欢迎访问留言。 准备工作： 1. 将开发好的jar包上传到服务器package目录下 2. Storm集群已经启动 我们提交一个WordCount任务： 为了方便，我们仍以blogchong老师的代码为例 GitHub项目链接，请读者自行打包并上传到nimbus节点上nimbus服务器进入

准备工作：将开发好的jar包上传到服务器nimbus节点上，如package目录下启动Storm集群执行命令storm jar ./wordCountByAndy.jar  com.andy.learning.storm_helloworld.SimpleTopology testtask1 解释下这条命令中的各个参数：jar:运行你的storm job./wordCountByAndy.jar:...