Storm学习

目录：

1. Storm介绍
2. Storm应用场景
3. Storm安装
4. Storm节点介绍
5. Storm核心组件
6. Storm开发
7. Storm集群搭建
8. 大数据平台技术衔接

 

一.Storm介绍

 

二.Storm应用场景

 

三.Storm安装：linux下系统下安装

先看官方文档：http://storm.apache.org/，如下，所以需要先安装与Storm对应的zookeep、Java、python

安装步骤：

1. 在系统上安装Java，如果你还没有安装
2. 安装ZooKeeper框架
3. 安装python
   安装教程：http://www.runoob.com/python/python-install.html
   注意：
   （1）如果执行 ./configure（检查编译环境）出现错误（包含很多no的情况），是因为没有安装插件，也可以提前执行
   yum install -y gcc-c++
   
   （2）退出ptthon，执行exit()
4. 安装Apache Storm框架
   1. 下载strom
      
   2. 上传、解压
   3. 配置环境变量
      
   4. 配置文件（storm是用 python写的，所以特别注意空格，少了空格或者多了控制都会运行出错）
      
   5. 启动：先启动zookeep，再启动storm
      
   6. 测试

 

四.Storm节点介绍

 

五.Storm核心组件

 

六.Storm开发

练习.统计单词

详细步骤：

1. 下载驱动包
   
2. 创建项目，项目结构
   
3. 在pom.xml中添加依赖包
   
4. 编写代码
   1. WordSpout.java
      
      
      
      
   2. WordBolt.java
      
      
   3. PrintBolt.java
      
      
   4. WordTopolgy.java
      
5. 运行WordTopolgy.java
   可能会返回
   
   重新以管理员运行eclipse
   运行成功之后，会一直运行，不停的进行计算

 

七.Storm集群搭建

详细步骤：使用3台虚拟机进行集群搭建

1. 安装Java
2. 安装zookeeper
3. 安装python
4. 安装storm
   1. 下载、上传、解压、安装、配置环境变量
   2. 修改配置文件
   3. 启动zookeeper，再启动storm
   4. 在web中访问strom
      
   5. 修改【六.Storm开发的项目】的main方法，然后将此项目打包成jar包，再storm中发布
      1. 修改：发布到集群
         
      2. 打包
         
      3. 发布
         
         结果：
         
   6. 结果
      

 

八.大数据平台技术衔接