-
Fix Under-replicated blocks in HDFS manually프로그래밍/hadoop 2018. 11. 15. 10:58728x90
su - <$hdfs_user> bash-4.1$ hdfs fsck / | grep 'Under replicated' | awk -F':' '{print $1}' >> /tmp/under_replicated_files -bash-4.1$ for hdfsfile in `cat /tmp/under_replicated_files`; do echo "Fixing $hdfsfile :" ; hadoop fs -setrep 3 $hdfsfile; done
728x90'프로그래밍 > hadoop' 카테고리의 다른 글
HDFS 데이터를 REMOTE HDFS로 COPY 할 때 (0) 2018.11.15 HA 구성 클러스터에서 발생한 Journal Node 오류 (0) 2018.11.15 Old Version HDP 삭제 (0) 2018.11.15 Ambari를 통한 업데이트 시 발생한 문제 (0) 2018.11.15 Ambari UnKnown Host 에러 (0) 2018.11.15