centos系统下zookeeper故障排查指南
本文提供一个逐步指南，帮助您在CentOS系统上有效排查ZooKeeper故障。
1. 验证ZooKeeper服务状态
首先，使用以下命令检查ZooKeeper服务状态：
sudo systemctl status zookeeper
如果服务未运行，使用以下命令启动：
sudo systemctl start zookeeper
要使其开机自启动：
sudo systemctl enable zookeeper
2. 分析ZooKeeper日志
检查ZooKeeper日志文件（通常位于/var/log/zookeeper/zookeeper.out），以获取故障诊断线索。
3. 检查配置文件zoo.cfg
仔细检查zoo.cfg文件，确保所有参数（服务器地址、数据目录、客户端端口等）配置正确无误。
4. 检查防火墙设置
确认防火墙未阻止ZooKeeper使用的端口（默认端口2181）。可以使用以下命令临时关闭防火墙（不推荐生产环境）：
sudo systemctl stop firewalld.service
或者，永久关闭防火墙（强烈建议在生产环境中使用更安全的防火墙策略，例如允许特定IP地址访问2181端口）：
sudo systemctl stop firewalld sudo systemctl disable firewalld
5. 验证Java环境
确保Java环境变量已正确设置。您可以编辑/etc/profile文件，添加以下内容并执行source /etc/profile使配置生效：
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk # 请替换为您的Java安装路径 export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar export ZOOKEEPER_HOME=/etc/apache/zookeeper # 请替换为您的ZooKeeper安装路径 export PATH=$ZOOKEEPER_HOME/bin:$PATH
6. 利用四字命令监控集群
ZooKeeper提供了一组四字命令（如stat、ruok、mntr）用于监控集群状态和调试问题。
7. 测试节点间网络连接
使用ping或telnet命令测试ZooKeeper集群中所有节点间的网络连通性。
8. 监控资源使用情况
检查节点的CPU、内存和磁盘使用情况，以识别潜在的资源瓶颈。
9. 处理常见问题
- 节点宕机: 检查节点宕机前的异常情况，确认服务器资源是否充足，并检查节点磁盘I/O性能。
- 网络问题: 检查服务器间的网络连接，确保ZooKeeper节点能够相互通信。
- 频繁Leader切换: 检查Leader节点的性能和网络状态，查看日志中是否存在Follower同步失败的情况。
如果问题依然存在，请参考ZooKeeper官方文档或寻求社区支持。 请记住，在生产环境中，谨慎操作防火墙设置，并优先考虑更安全的替代方案。
