搭建 Kafka 集群详细教程
下面以 搭建 Zookeeper 集群详细教程 中搭建的 zookeeper 集群为例
1. 安装 Kafka
- 将在
/tmp目录下的kafka_2.11-2.4.1.tgz解压
tar -zxvf kafka_2.11-2.4.1.tgz- 移动到
/opt/module目录下，并重命名为kafka
mv kafka_2.11-2.4.1 /opt/module/kafka大数据
搭建 Zookeeper 集群详细教程
下面以 搭建 Hadoop 集群详细教程 中搭建的 hadoop 集群为例
1. 安装 Zookeeper
- 将在
/tmp目录下的zookeeper-3.4.14.tar.gz解压
tar -zxvf zookeeper-3.4.14.tar.gz- 移动到
/opt/module目录下，并重命名为zookeeper
mv zookeeper-3.4.14 /opt/module/zookeeper搭建 Hadoop 集群详细教程
1. 准备工作
1.1 环境
- Centos 7
- JDK 1.8
- Hadoop 2.10.0
1.2 集群部署规划
| hadoop1 | hadoop2 | hadoop3 | |
|---|---|---|---|
| HDFS | NameNode | SecondaryNameNode | |
| DataNode | DataNode | DataNode | |
| Yarn | ResourceManager | ||
| NodeManager | NodeManager | NodeManager |