在windows10下搭建Storm并运行WordCount详解（单机版）！

ゞ浴缸里的玫瑰 2022-04-21 15:00 304阅读 0赞

*  发布时间：2018-04-10 来源：网络 上传者：用户
 *  关键字: [单机版][Link 1] [搭建][Link 2] [详解][Link 3] [WordCount][] [windows10][] [运行][Link 4] [Storm][]
    
    [发表文章][Link 5]
 *  摘要：作为主流的大数据处理平台,不同于批处理的Hadoop,Storm的实时计算以及拓扑结构有其独有的优势(当然,只是针对于不同的情况下)。初学Storm,网上的教程大都是在Linux下搭建的平台,也有少许windows下搭建的,这里,结合本人亲自摸索以及对网上教程的参考给出Stepbystep教程。着重感谢fqf的指导和帮助,fqf的配置教程。Step1:准备四样必须安装的东西①jdk//jdk6②Python//Python27③zookeeper//zookeeper-3.4
 *  作为主流的大数据处理平台,不同于批处理的Hadoop,Storm的实时计算以及拓扑结构有其独有的优势(当然,只是针对于不同的情况下)。初学Storm,网上的教程大都是在Linux下搭建的平台,也有少许windows下搭建的,这里,结合本人亲自摸索以及对网上教程的参考给出Step by step教程。着重感谢fqf的指导和帮助,fqf的配置教程。
    
    Step 1:准备四样必须安装的东西  
    ①jdk //jdk 6  
    ②Python //Python 27  
    ③zookeeper //zookeeper-3.4.6  
    ④storm //apache-storm-0.9.3  
    这里jdk 、zookeeper、storm都不是最新版本,而且不能使最新版本,因为storm并没有发行针对于windows下的版本,apache-storm-0.9.3只是修改后的测试版,而且值得注意的是,不同jdk版本和zookeeper版本也有可能导致配置不成功,本人就在版本上卸载重装了很多次后才搭建成功,读者可自行尝试。以上四个版本是我搭建成功所用的版本。
    
    Step 2:配置环境变量  
    ①jdk需要配置
    
    %JAVA\_HOME% C:/Java/jdk1.6.0\_43 Path:%JAVA\_HOME%/bin /\* \*值得一提的是,java的默认安装环境在Program Files下,如果这么装则运行时会报错,%JAVA\_HOME%不对,原因是这样%JAVA\_HOME%路路径Program Files中含有空格, \*我是在C盘根目录下创建JAVA的文件夹然后把jdk和jre都装在这个文件夹里 \*/
    
    ②Python的配置
    
    C:/Python27 C:/Python27/Lib/site-packages C:/Python27/Scripts
    
    ③zookeeper配置
    
    C:/Storm\_Project/Zookeeper/zookeeper-3.4.6/binC:/Storm\_Project/Zookeeper/zookeeper-3.4.6/conf我是在C盘根目录下创建了一个Storm\_Project的文件夹,然后把zookeeper和Storm都装在这
    
    ④Storm配置
    
    %STORM\_HOME% C:/Storm\_Project/Storm/apache-storm-0.9.3 Path:%STORM\_HOME%/bin
    
    ⑤PATHEXT配置
    
    最后加上 ;.PY
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows]
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 1]
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 2]
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 3]
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 4]
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 5]
    
    Step 3:
    
    打开控制台(win+r cmd)①进入zookeeper的bin目录下找到zkSever双击打开(一定要先打开zkSever) ②进入控制台(win + r cmd) cd %STORM\_HOME% storm nimbus storm supervisor storm ui //这三个命令每输入一个都会看到zkSever控制台上的信息会改变还可以输入jps查询 ③打开浏览器输入 http://localhost:8080/ 弹出ui界面且没有报错则配置成功
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 6]
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 7]
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 8]
    
    Step 4:
    
    测试WordCount ①下载storm-start源码:https://github.com/nathanmarz/storm-starter ②进入storm-start解压目录运行命令打包:mvn -f m2-pom.xml package (可以直接找我要解压好的包qq:915606624) ③先cd bin/再运行:storm jar storm-starter-0.0.1-SNAPSHOT-jar-with-dependencies.jar storm.starter.WordCountTopology test 生成一个topology ④控制台输入 storm list 查看topology列表
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 9]
    
    ![在windows10下搭建Storm并运行WordCount详解（单机版）！\_Windows][windows10_Storm_WordCount_Windows 10]
    
    这个时候刷新UI界面就可以看到topology了,执行完毕后,必须在UI界面上点击topology test打开并在topology action里手动kill这个topology否则你重启都不会结束(亲测)。
    
    小结:在windows配置storm比在linux下配置要恶心得多,配置一下只是为了熟悉storm,得助于网上众多教程以及fqf的指导,才得以配置成功,现在只想分享一下自己的经验,不足之处还望读者见谅并给出指导意见。在配置环境变量的时候不小心误删了path,恢复无果只能重装系统,在此提醒大家配置环境变量最好先备份。初学Storm如果有对大数据云计算这方面有研究的,欢迎交流。
 *  以上是[在windows10下搭建Storm并运行WordCount详解（单机版）！][windows10_Storm_WordCount]的内容，更多 [单机版 ][Link 1] [搭建 ][Link 2] [详解 ][Link 3] [WordCount ][WordCount] [windows10 ][windows10] [运行 ][Link 4] [Storm ][Storm] 的内容，请您使用右上方搜索功能获取相关信息。

[Link 1]: https://www.aliyun.com/jiaocheng/topic_14721.html
[Link 2]: https://www.aliyun.com/jiaocheng/topic_1076.html
[Link 3]: https://www.aliyun.com/jiaocheng/topic_1097.html
[WordCount]: https://www.aliyun.com/jiaocheng/topic_23501.html
[windows10]: https://www.aliyun.com/jiaocheng/topic_1073.html
[Link 4]: https://www.aliyun.com/jiaocheng/topic_1623.html
[Storm]: https://www.aliyun.com/jiaocheng/topic_24657.html
[Link 5]: https://yq.aliyun.com/articles/new
[windows10_Storm_WordCount_Windows]: /images/20220414/1033aad2246a45f5817b502a3fdd6c97.png
[windows10_Storm_WordCount_Windows 1]: /images/20220414/252afbabdcbf4ec292efad771f0da224.png
[windows10_Storm_WordCount_Windows 2]: /images/20220414/8f2b3b5e6a174ecd9af14e464f552c0d.png
[windows10_Storm_WordCount_Windows 3]: /images/20220414/8792cfdb1ce346f3b7fe2e04ab117649.png
[windows10_Storm_WordCount_Windows 4]: /images/20220414/d0e65ddd061147aa92a66f6e3e1c4230.png
[windows10_Storm_WordCount_Windows 5]: /images/20220414/bed4df3a93b046629e1ef32ecdb423db.png
[windows10_Storm_WordCount_Windows 6]: /images/20220414/d74444eadd7d4272b6f8242437db154d.png
[windows10_Storm_WordCount_Windows 7]: /images/20220414/a2bca6b432ec46f0a5ce6a8c26749c51.png
[windows10_Storm_WordCount_Windows 8]: /images/20220414/1883ffb3864f447f8891bebc09d9bef6.png
[windows10_Storm_WordCount_Windows 9]: /images/20220414/d1a006acd4084a8898f0bc9c02ac5073.png
[windows10_Storm_WordCount_Windows 10]: /images/20220414/8ab2625e280d4cd58a4ae583f3e9b5f1.png
[windows10_Storm_WordCount]: https://www.aliyun.com/jiaocheng/878083.html