Apache Storm - 下载安装和环境设置

官网下载 Apache Storm

您可以从官方网站下 Apache Storm 的最新稳定版本。

官网地址:https://storm.apache.org/


现在让我们看看如何在您的机器上安装 Apache Storm 框架。 这里有三个步骤 −

  • 在您的系统上安装 Java(如果您还没有的话)。
  • 安装 ZooKeeper 框架。
  • 安装 Apache Storm 框架。

步骤 1 + 验证 Java 安装

使用以下命令检查您的系统上是否已经安装了 Java。

$ java -version

如果 Java 已经存在,那么您会看到它的版本号。 否则,请下载最新版本的 JDK。

步骤 1.1 − Download JDK

使用以下链接下载最新版本的 JDK − www.oracle.com

步骤 1.2 − 提取文件

文件通常被下载到 downloads 文件夹中。 使用以下命令提取 tar 设置。

$ cd /go/to/download/path
$ tar -zxf jdk-8u60-linux-x64.gz

步骤 1.3 − 移动到 opt 目录

要让所有用户都可以使用 Java,请将提取的 Java 内容移动到"/usr/local/java"文件夹。

$ su
password: (type password of root user)
$ mkdir /opt/jdk
$ mv jdk-1.8.0_60 /opt/jdk/

步骤 1.4 − 设置 PATH 路径

要设置路径和 JAVA_HOME 变量,请将以下命令添加到 ~/.bashrc 文件中。

export JAVA_HOME =/usr/jdk/jdk-1.8.0_60
export PATH=$PATH:$JAVA_HOME/bin

现在将所有更改应用到当前正在运行的系统中。

$ source ~/.bashrc

步骤 1.5 − Java 替代品

使用以下命令更改 Java 替代项。

update-alternatives --install /usr/bin/java java /opt/jdk/jdk1.8.0_60/bin/java 100

步骤 1.6

现在使用步骤 1 中说明的验证命令 (java -version) 验证 Java 安装。


步骤 2 − ZooKeeper 框架安装

步骤 2.1 − 下载 ZooKeeper

要在您的机器上安装 ZooKeeper 框架,请访问以下链接并下载最新版本的 ZooKeeper http://zookeeper.apache.org/releases.html

步骤 2.2 − 提取 tar 文件

使用以下命令解压 tar 文件 −

$ cd opt/
$ tar -zxf zookeeper-3.4.6.tar.gz
$ cd zookeeper-3.4.6
$ mkdir data

步骤 2.3 − 创建配置文件

使用命令"vi conf/zoo.cfg"打开名为"conf/zoo.cfg"的配置文件,并将以下所有参数设置为起点。

$ vi conf/zoo.cfg
tickTime=2000
dataDir=/path/to/zookeeper/data
clientPort=2181
initLimit=5
syncLimit=2

配置文件保存成功后,就可以启动 ZooKeeper 服务器了。

步骤 2.4 − 启动 ZooKeeper 服务器

使用以下命令启动 ZooKeeper 服务器。

$ bin/zkServer.sh start

执行该命令后,会得到如下响应 −

$ JMX enabled by default
$ Using config: /Users/../zookeeper-3.4.6/bin/../conf/zoo.cfg
$ Starting zookeeper ... STARTED

步骤 2.5 − 启动 CLI

使用以下命令启动 CLI。

$ bin/zkCli.sh

执行上述命令后,您将连接到 ZooKeeper 服务器并获得以下响应。

Connecting to localhost:2181
................
................
................
Welcome to ZooKeeper!
................
................
WATCHER::
WatchedEvent state:SyncConnected type: None path:null
[zk: localhost:2181(CONNECTED) 0]

步骤 2.6 − 停止 ZooKeeper 服务器

连接服务器并执行所有操作后,您可以使用以下命令停止 ZooKeeper 服务器。

bin/zkServer.sh stop

您已经在您的机器上成功安装了 Java 和 ZooKeeper。 现在让我们看看安装 Apache Storm 框架的步骤。


步骤 3 − Apache Storm 框架安装

步骤 3.1 下载 Storm

要在您的机器上安装 Storm 框架,请访问以下链接并下载最新版本的 Storm http ://storm.apache.org/downloads.html

步骤 3.2 − 提取 tar 文件

使用以下命令解压 tar 文件 −

$ cd opt/
$ tar -zxf apache-storm-0.9.5.tar.gz
$ cd apache-storm-0.9.5
$ mkdir data

步骤 3.3 − 打开配置文件

当前版本的 Storm 在"conf/storm.yaml"中包含一个配置 Storm 守护进程的文件。 将以下信息添加到该文件。

$ vi conf/storm.yaml
storm.zookeeper.servers:
 - "localhost"
storm.local.dir: “/path/to/storm/data(any path)”
nimbus.host: "localhost"
supervisor.slots.ports:
 - 6700
 - 6701
 - 6702
 - 6703

应用所有更改后,保存并返回终端。

步骤 3.4 − Start the Nimbus

$ bin/storm nimbus

步骤 3.5 − 启动 Supervisor

$ bin/storm supervisor

Step 3.6 启动 UI

$ bin/storm ui

启动 Storm 用户界面应用程序后,在您喜欢的浏览器中输入 URL http://localhost:8080,您可以看到 Storm 集群信息及其运行 topology 。 该页面应类似于以下屏幕截图。

Strom UI