Storm 安装
安装 Apache Storm 框架有三个主要步骤:
- 如果尚未安装 JDK,请先在系统上安装 JDK。
- 安装 ZooKeeper 框架。
- 安装 Apache Storm 框架。
第1步 - 验证JDK安装
使用以下命令检查您的系统上是否已安装 JDK。
$ java -version
如果 JDK 已经存在,那么你会看到它的版本号。否则,请下载最新版本的 JDK。
步骤1.1 - 下载 JDK
下载最新版本的 JDK。
例如,如果安装 JDK 8u60,那么在你的机器上下载文件 jdk-8u60-linux-x64.tar.gz。
步骤1.2 - 提取文件
解压缩 tar 文件:
$ cd /go/to/download/path $ tar -zxf jdk-8u60-linux-x64.gz
步骤1.3 - 移动到opt目录
要让所有用户都可以使用 Java,请将提取的 Java 内容移动到 /usr/local/java 文件夹中。
$ su password: (type password of root user) $ mkdir /opt/jdk $ mv jdk-1.8.0_60 /opt/jdk/
步骤1.4 - 设置路径
要设置路径和JAVA_HOME变量,请将以下命令添加到〜/ .bashrc文件中。
export JAVA_HOME =/usr/jdk/jdk-1.8.0_60 export PATH=$PATH:$JAVA_HOME/bin
现在将所有更改应用到当前正在运行的系统中。
$ source ~/.bashrc
步骤1.5 - Java选择
使用以下命令更改Java选项。
update-alternatives --install /usr/bin/java java /opt/jdk/jdk1.8.0_60/bin/java 100
步骤1.6
现在使用步骤1中介绍的验证命令(java -version)验证Java安装。
第2步 - ZooKeeper框架安装
步骤2.1 - 下载ZooKeeper
要在您的机器上安装ZooKeeper框架,请访问以下链接并下载最新版本的ZooKeeper http://zookeeper.apache.org/releases.html
截至目前,ZooKeeper的最新版本是3.4.6(ZooKeeper-3.4.6.tar.gz)。
步骤2.2 - 解压缩tar文件
使用以下命令提取tar文件 -
$ cd opt/ $ tar -zxf zookeeper-3.4.6.tar.gz $ cd zookeeper-3.4.6 $ mkdir data
步骤2.3 - 创建配置文件
使用命令“vi conf / zoo.cfg”打开名为“conf / zoo.cfg”的配置文件,并将所有以下参数设置为起点。
$ vi conf/zoo.cfg tickTime=2000 dataDir=/path/to/zookeeper/data clientPort=2181 initLimit=5 syncLimit=2
一旦配置文件保存成功,您可以启动ZooKeeper服务器。
步骤2.4 - 启动ZooKeeper服务器
使用以下命令启动ZooKeeper服务器。
$ bin/zkServer.sh start
执行此命令后,您将得到如下响应
$ JMX enabled by default $ Using config: /Users/../zookeeper-3.4.6/bin/../conf/zoo.cfg $ Starting zookeeper ... STARTED
步骤2.5 - 启动CLI
使用以下命令启动CLI。
$ bin/zkCli.sh
执行上述命令后,您将连接到ZooKeeper服务器并获得以下响应
Connecting to localhost:2181 ................ ................ ................ Welcome to ZooKeeper! ................ ................ WATCHER:: WatchedEvent state:SyncConnected type: None path:null [zk: localhost:2181(CONNECTED) 0]
第2.6步 - 停止ZooKeeper服务器
连接服务器并执行所有操作后,可以使用以下命令停止ZooKeeper服务器。
bin/zkServer.sh stop
您已经在您的机器上成功安装了Java和ZooKeeper。现在让我们看看安装Apache Storm框架的步骤。
第3步 - Apache Storm框架安装 步骤3.1下载Storm 要在您的机器上安装Storm框架,请访问以下链接并下载最新版本的Storm http://storm.apache.org/downloads.html
截至目前,Storm的最新版本是“apache-storm-0.9.5.tar.gz”。
第3.2步 - 解压缩tar文件 使用以下命令提取tar文件
$ cd opt/ $ tar -zxf apache-storm-0.9.5.tar.gz $ cd apache-storm-0.9.5 $ mkdir data
Step 3.3 − 步骤3.3 - 打开配置文件
Storm的当前版本包含一个配置Storm守护进程的文件“conf / storm.yaml”。将以下信息添加到该文件。
$ vi conf/storm.yaml storm.zookeeper.servers: - "localhost" storm.local.dir: “/path/to/storm/data(any path)” nimbus.host: "localhost" supervisor.slots.ports: - 6700 - 6701 - 6702 - 6703
应用完所有更改后,保存并返回到终端。
Step 3.4 − 步骤3.4 - 启动Nimbus
$ bin/storm nimbus
Step 3.5 − 第3.5步 - 启动主管
$ bin/storm supervisor
Step 3.6 步骤3.6启动UI
$ bin/storm ui
启动Storm用户界面应用程序后,在您喜欢的浏览器中键入URL http:// localhost:8080,您可以看到Storm群集信息及其运行拓扑。该页面应与以下屏幕截图类似。
我们已经了解了Apache Storm的核心技术细节,现在是编写一些简单场景的时候了。 场景 - 移动呼叫日志分析器移动电话及其持续时间将作为Apache Storm的输入提供,Storm将处理并分组相同呼叫者和 ...