SuifengFlying

公告

欢迎来到我的博客，这里记录生活与技术。

了解更多

575 字

3 分钟

ZooKeeper的配置

2025-01-15

BigData

/

ZooKeeper

/

Deployment

ZooKeeper的配置#

编辑配置文件#

1
cd /export/servers/zookeeper/conf

复制模板为正式配置文件

1
sudo cp /export/servers/zookeeper/conf/zoo_sample.cfg /export/servers/zookeeper/conf/zoo.cfg
2

3
sudo vim zoo.cfg

然后输入ggdG(删除全部内容，大小写严格遵守)，输入以下配置

1
# 数据同步的基本时间单位（毫秒），默认2000
2
tickTime=2000
3

4
#  follower初始化连接到leader的最大心跳数（tickTime的倍数）
5
initLimit=10
6

7
#  follower与leader之间发送消息的最大心跳数（超过则认为连接失效）
8
syncLimit=5
9

10
# ZooKeeper数据存储目录（需与HBase的hbase.zookeeper.property.dataDir一致）
11
dataDir=/export/servers/zookeeper/data
12

13
# 客户端连接ZooKeeper的端口（默认2181，HBase会通过此端口连接）
14
clientPort=2181
15

16
# 集群节点配置（格式：server.编号=主机名:通信端口:选举端口）
17
# 编号需与每个节点的myid文件内容一致
18
server.1=hadoop01:2888:3888
19
server.2=hadoop02:2888:3888
20
server.3=hadoop03:2888:3888
21

22
# 允许客户端连接的最大数量（默认60，按需调整）
23
maxClientCnxns=60
24

25
# 自动清理事务日志的时间（小时），默认0表示不自动清理
26
autopurge.purgeInterval=1

在hadoop01上创建数据目录并写入myid#

1
mkdir -p /export/servers/zookeeper/data
2

3
sudo vim /export/servers/zookeeper/data/myid

写入以下内容

1
1

ZooKeeper的分发#

环境变量的分发#

1
scp /etc/profile hadoop02:/tmp/profile
2

3
ssh hadoop02 "sudo cp /tmp/profile /etc/profile && sudo rm /tmp/profile"
4

5
scp /etc/profile hadoop03:/tmp/profile
6

7
ssh hadoop03 "sudo cp /tmp/profile /etc/profile && sudo rm /tmp/profile"

ZooKeeper的分发#

1
scp -r /export/servers/zookeeper hadoop02:/tmp/
2

3
ssh hadoop02 "sudo cp -r /tmp/zookeeper/ /export/servers/ && sudo rm -rf /tmp/zookeeper"
4

5
scp -r /export/servers/zookeeper hadoop03:/tmp/
6

7
ssh hadoop03 "sudo cp -r /tmp/zookeeper/ /export/servers/ && sudo rm -rf /tmp/zookeeper"

分别编辑另2个服务器的myid#

进入到hadoop02：

1
sudo vim /export/servers/zookeeper/data/myid

进入到hadoop03

1
sudo vim /export/servers/zookeeper/data/myid

重新加载环境变量#

1
ssh hadoop02 "bash -c 'source /etc/profile'"
2

3
ssh hadoop03 "bash -c 'source /etc/profile'"

ZooKeeper的运行#

查看端口是否占用#

1
sudo netstat -tunlp | grep 2181

如若有，使用sudo kill pid 进行强制结束该进程

为ZooKeeper文件夹赋权#

1
sudo chown -R hadooper /export/servers/zookeeper
2

3
sudo chmod -R 755 /export/servers/zookeeper
4

5
ssh hadoop02 "sudo chown -R hadooper /export/servers/zookeeper && sudo chmod -R 755 /export/servers/zookeeper"
6

7
ssh hadoop03 "sudo chown -R hadooper /export/servers/zookeeper && sudo chmod -R 755 /export/servers/zookeeper"

关闭防火墙

1
sudo ufw disable
2

3
ssh hadoop02 "sudo ufw disable"
4

5
ssh hadoop03 "sudo ufw disable"

执行ZooKeeper运行指令#

执行以下指令，然后执行jps以查看zookeeper是否正常启动，如若正常启动，则如下图所示

1
$ZOOKEEPER_HOME/bin/zkServer.sh start
2

3
ssh hadoop02 "bash -c 'source /etc/profile && $ZOOKEEPER_HOME/bin/zkServer.sh start'"
4

5
ssh hadoop03 "bash -c 'source /etc/profile && $ZOOKEEPER_HOME/bin/zkServer.sh start'"

查看选举结果#

1
$ZOOKEEPER_HOME/bin/zkServer.sh status
2

3
ssh hadoop02 "bash -c 'source /etc/profile && $ZOOKEEPER_HOME/bin/zkServer.sh status'"
4

5
ssh hadoop03 "bash -c 'source /etc/profile && $ZOOKEEPER_HOME/bin/zkServer.sh status'"

leader出现在哪个节点都可以

ZooKeeper的配置

https://mizuki.mysqil.com/posts/zookeeper部署/

作者

SuifengFlying

发布于

2025-01-15

许可协议

CC BY-NC-SA 4.0

Big Data Deployment

12 / 12

Spark集群部署

欢迎来到 SuifengFlying!

ZooKeeper的配置#

编辑配置文件#

在hadoop01上创建数据目录并写入myid#

ZooKeeper的分发#

环境变量的分发#

ZooKeeper的分发#

分别编辑另2个服务器的myid#

重新加载环境变量#

ZooKeeper的运行#

查看端口是否占用#

为ZooKeeper文件夹赋权#

执行ZooKeeper运行指令#

查看选举结果#

Big Data Deployment

Related articles