01.hadoop的节点增加磁盘导致数据分布不均处理方式
1、概要因业务数据量的增长，hadoop的datanode节点空间不足。扩容方案2种：1、节点的服务器增加磁盘；2、增加datanode数据节点服务器；最终选择方案一，服务器增加磁盘，hadoop的hdfs支持多个路径的数据写入；产生问题：因服务器增加了磁盘，原旧数据目录的空间已使用90%，新磁盘空间使用率10%，导致该节点上多个数据目录，数据分布不均；新加磁盘只会承载后续写入的数据HDFS...
大数据
2025-09-02 PM
HBASE 部署HA
即接HADOOP HA机制基础上部署参考一下连接HADOOP HA部署连接1 Hbase搭建HA机制在hanode01上配置hbase1.1 hbase安装a> 解压hbase-1.4.13.tar.gz到/opt/software下$ tar -xvf hbase-1.4.14.tar.gz -C /opt/softwareb> 添加hbase环境变量$ vim /etc/pr...
大数据
2021-07-20 PM
HADOOP 部署HA
一、准备工作1.服务器信息序号hostnameip配置主要进程1hanode01192.168.0.2014核8g1TNameNode，ZKFC，HMaster，Keepalived2hanode02192.168.0.2024核8g1TNameNode，ZKFC，HMaster，Keepalived3hanode03192.168.0.2034核8g1TResourceManager4ha...
大数据
2021-07-20 PM