centos安装cdh集群时常见问题有哪些？

环境准备与规划

在安装CDH（Cloudera Distribution including Hadoop）集群前，需做好充分的环境准备，确定集群规模与角色分配，通常包括Master节点（运行NameNode、ResourceManager等服务）、Worker节点（运行DataNode、NodeManager等）和客户端节点，硬件配置需满足CDH最低要求，建议Master节点配置16GB以上内存，Worker节点根据数据量配置足够存储空间，操作系统选择CentOS 7.x，确保所有节点版本一致，关闭防火墙和SELinux，避免服务冲突，网络方面，规划内网IP段，配置hosts文件实现节点间通信，并配置时间同步服务（如NTP），确保集群时间一致。

软件依赖与仓库配置

CentOS系统需安装JDK 1.8或更高版本，推荐使用Oracle JDK或OpenJDK，通过yum命令安装基础依赖包，如wget、rsync、libstdc++等，配置CDH官方软件仓库，下载Cloudera Manager的repository文件，将其添加到CentOS的yum源目录中，执行yum clean all和yum update更新系统，确保所有软件包为最新版本，需配置SSH免密登录，Master节点通过SSH无密码访问所有Worker节点，便于后续集群部署和自动化管理。

Cloudera Manager与CDH安装

首先安装Cloudera Manager Server，使用yum命令从配置的仓库中安装cloudera-manager-daemons、cloudera-manager-server和cloudera-manager-agent包，安装完成后，启动Cloudera Manager Server服务，通过浏览器访问http://<master-ip>:7180，使用admin/admin登录初始化界面，在Cloudera Manager中创建集群，添加所有节点并验证主机名和SSH连接，选择CDH版本和组件，根据业务需求选择HDFS、YARN、Hive、HBase等服务，配置存储目录、内存分配等参数，待所有服务启动后，通过Web界面监控集群状态。

服务优化与问题排查

集群部署完成后，需进行优化配置，调整HDFS的块大小（根据文件类型选择128MB或256MB），优化YARN的内存和CPU资源分配，确保集群性能稳定，定期检查日志文件（位于/var/log/cloudera-scm-*），排查服务异常，常见问题包括JDK版本不兼容、网络通信失败或磁盘空间不足，可通过Cloudera Manager的警报功能定位问题，或使用cloudera-agent命令手动重启服务，建议启用集群备份功能，定期保存配置和元数据，防止数据丢失。

FAQs

Q1: 安装过程中出现“Parcel下载失败”怎么办？
A1: 检查网络连接是否正常，确认Cloudera Manager的Parcel仓库URL是否正确，可手动下载Parcel文件并上传到Cloudera Manager的/opt/cloudera/parcel-repo目录，然后在Web界面中重新加载Parcel。

Q2: 集群运行中DataNode频繁宕机，如何排查？
A2: 首先检查DataNode节点的磁盘空间使用率和健康状态，通过df -h命令确认是否磁盘满，查看DataNode日志（/var/log/hadoop-hdfs/）定位错误信息，可能原因是磁盘坏块或JVM内存溢出,需调整JVM参数或更换故障磁盘。