728x90
su - <$hdfs_user> bash-4.1$ hdfs fsck / | grep 'Under replicated' | awk -F':' '{print $1}' >> /tmp/under_replicated_files -bash-4.1$ for hdfsfile in `cat /tmp/under_replicated_files`; do echo "Fixing $hdfsfile :" ; hadoop fs -setrep 3 $hdfsfile; done
'프로그래밍 > hadoop' 카테고리의 다른 글
HDFS 데이터를 REMOTE HDFS로 COPY 할 때 (0) | 2018.11.15 |
---|---|
HA 구성 클러스터에서 발생한 Journal Node 오류 (0) | 2018.11.15 |
Old Version HDP 삭제 (0) | 2018.11.15 |
Ambari를 통한 업데이트 시 발생한 문제 (0) | 2018.11.15 |
Ambari UnKnown Host 에러 (0) | 2018.11.15 |