Apache Storm - 安装

  • 简述

    现在让我们看看如何在您的机器上安装 Apache Storm 框架。这里有三个主要步骤 -
    • 如果您还没有 Java,请在您的系统上安装它。
    • 安装 ZooKeeper 框架。
    • 安装 Apache Storm 框架。
  • 第 1 步 - 验证 Java 安装

    使用以下命令检查您的系统上是否已安装 Java。
    
    $ java -version
    
    如果 Java 已经存在,那么您会看到它的版本号。否则,请下载最新版本的 JDK。

    步骤 1.1 - 下载 JDK

    使用以下链接下载最新版本的 JDK - www.oracle.com
    最新版本是JDK 8u 60,文件是“jdk-8u60-linux-x64.tar.gz”. 在您的机器上下载文件。

    步骤 1.2 - 提取文件

    通常文件被下载到downloads文件夹。使用以下命令提取 tar 设置。
    
    $ cd /go/to/download/path
    $ tar -zxf jdk-8u60-linux-x64.gz
    

    步骤 1.3 - 移动到 opt 目录

    要使所有用户都可以使用 Java,请将提取的 Java 内容移动到“/usr/local/java”文件夹。
    
    $ su
    password: (type password of root user)
    $ mkdir /opt/jdk
    $ mv jdk-1.8.0_60 /opt/jdk/
    

    步骤 1.4 - 设置路径

    要设置路径和 JAVA_HOME 变量,请将以下命令添加到 ~/.bashrc 文件。
    
    export JAVA_HOME =/usr/jdk/jdk-1.8.0_60
    export PATH=$PATH:$JAVA_HOME/bin
    
    现在将所有更改应用到当前正在运行的系统中。
    
    $ source ~/.bashrc
    

    步骤 1.5 - Java 替代品

    使用以下命令更改 Java 替代项。
    
    update-alternatives --install /usr/bin/java java /opt/jdk/jdk1.8.0_60/bin/java 100
    

    步骤 1.6

    现在使用验证命令验证 Java 安装(java -version)步骤 1 中解释。
  • 第 2 步 - ZooKeeper 框架安装

    步骤 2.1 - 下载 ZooKeeper

    要在您的机器上安装 ZooKeeper 框架,请访问以下链接并下载最新版本的 ZooKeeper http://zookeeper.apache.org/releases.html
    截至目前,ZooKeeper 的最新版本是 3.4.6(ZooKeeper-3.4.6.tar.gz)。

    步骤 2.2 - 提取 tar 文件

    使用以下命令提取 tar 文件 -
    
    $ cd opt/
    $ tar -zxf zookeeper-3.4.6.tar.gz
    $ cd zookeeper-3.4.6
    $ mkdir data
    

    步骤 2.3 - 创建配置文件

    使用命令“vi conf/zoo.cfg”打开名为“conf/zoo.cfg”的配置文件,并将以下所有参数设置为起点。
    
    $ vi conf/zoo.cfg
    tickTime=2000
    dataDir=/path/to/zookeeper/data
    clientPort=2181
    initLimit=5
    syncLimit=2
    
    配置文件保存成功后,就可以启动 ZooKeeper 服务器了。

    步骤 2.4 - 启动 ZooKeeper 服务器

    使用以下命令启动 ZooKeeper 服务器。
    
    $ bin/zkServer.sh start
    
    执行此命令后,您将收到如下响应 -
    
    $ JMX enabled by default
    $ Using config: /Users/../zookeeper-3.4.6/bin/../conf/zoo.cfg
    $ Starting zookeeper ... STARTED
    

    步骤 2.5 - 启动 CLI

    使用以下命令启动 CLI。
    
    $ bin/zkCli.sh
    
    执行上述命令后,您将连接到 ZooKeeper 服务器并获得以下响应。
    
    Connecting to localhost:2181
    ................
    ................
    ................
    Welcome to ZooKeeper!
    ................
    ................
    WATCHER::
    WatchedEvent state:SyncConnected type: None path:null
    [zk: localhost:2181(CONNECTED) 0]
    

    步骤 2.6 - 停止 ZooKeeper 服务器

    连接服务器并执行所有操作后,您可以使用以下命令停止 ZooKeeper 服务器。
    
    bin/zkServer.sh stop
    
    您已经在您的机器上成功安装了 Java 和 ZooKeeper。现在让我们看看安装 Apache Storm 框架的步骤。
  • 第 3 步 - Apache Storm 框架安装

    步骤 3.1 下载风暴

    要在您的机器上安装 Storm 框架,请访问以下链接并下载最新版本的 Storm http://storm.apache.org/downloads.html
    截至目前,Storm 的最新版本是“apache-storm-0.9.5.tar.gz”。

    步骤 3.2 - 提取 tar 文件

    使用以下命令提取 tar 文件 -
    
    $ cd opt/
    $ tar -zxf apache-storm-0.9.5.tar.gz
    $ cd apache-storm-0.9.5
    $ mkdir data
    

    步骤 3.3 - 打开配置文件

    当前版本的 Storm 在“conf/storm.yaml”中包含一个配置 Storm 守护进程的文件。将以下信息添加到该文件。
    
    $ vi conf/storm.yaml
    storm.zookeeper.servers:
     - "localhost"
    storm.local.dir: “/path/to/storm/data(any path)”
    nimbus.host: "localhost"
    supervisor.slots.ports:
     - 6700
     - 6701
     - 6702
     - 6703
    
    应用所有更改后,保存并返回终端。

    步骤 3.4 - 启动 Nimbus

    
    $ bin/storm nimbus
    

    步骤 3.5 - 启动主管

    
    $ bin/storm supervisor
    

    步骤 3.6 启动 UI

    
    $ bin/storm ui
    
    启动 Storm 用户界面应用程序后,输入 URLhttp://localhost:8080在您喜欢的浏览器中,您可以看到 Storm 集群信息及其运行拓扑。该页面应类似于以下屏幕截图。
    流用户界面