环境磁盘扩缩容方案datanode磁盘扩容

环境磁盘扩缩容方案datanode磁盘扩容

码农世界 2024-05-17 前端 60 次浏览 0个评论

datanode磁盘扩容

扩容磁盘

1.1 扩容前检查、新盘初始化

确定block副本统计正常,无丢块,无under-replicated 块

后台执行命令检查

hdfs  fsck /
无异常可进行以下步骤进行磁盘扩容

新盘初始化

##格式化新盘,命令示例:
mkfs.xfs /dev/sdc
##挂载新盘,命令示例:
mount /dev/sdc /data1
lsblk -o UUID,MOUNTPOINT,FSTYPE,NAME #获取新磁盘uuid
echo 'UUID=<新磁盘UUID> <挂载点> xfs defaults 0 0' >> /etc/fstab

1.1-1磁盘读写性能

测试两个盘之间的读写性能(用于balance时估算时间)

  1. 测试旧盘--->新盘写入性能
  2. 多测几次取平均值
#if为旧盘文件(找一个较大的文件测试)
#of为新盘文件
dd if=/data/filename  of=/data1/test1 bs=8M count=100 oflag=direct
dd if=/data/filename  of=/data1/test2 bs=8M count=100 oflag=direct
dd i

转载请注明来自码农世界,本文标题:《环境磁盘扩缩容方案datanode磁盘扩容》

百度分享代码,如果开启HTTPS请参考李洋个人博客
每一天,每一秒,你所做的决定都会改变你的人生!

发表评论

快捷回复:

评论列表 (暂无评论,60人围观)参与讨论

还没有评论,来说两句吧...

Top