# datanode

3개의 포스트

Failed to place enough replicas, still in need of 1 to reach 3

hadoop datanode 3대에서 decomission 시 아래와 같은 warning 발생.기존 복제 개수인 3을 충족하지 못하기 때문.2022-12-16 19:43:57,601 WARN blockmanagement.BlockPlacementPolicy (Bloc

2022년 12월 18일
·
0개의 댓글
·
post-thumbnail

[ERROR] Hadoop Datanode 실행 안됨Initialization failed for Block pool <registering> 0. Exiting

실행 환경 > OS : Redhat8 Hadoop Version : 3.3.4 ERROR start-dfs.sh를 실행하면 Namenode 만 실행되고 Datanode는 올라오지 않는다. 로그 로그는 /logs/hadoop-xxxx-datanode-xxxxx.int

2022년 11월 20일
·
0개의 댓글
·

데이터노드 복제 파이프라인

HDFS 파일에 데이터를 쓸때..1\. 클라이언트 로컬 캐시에 데이터 기록. 캐시 사이즈가 HDFS 블록 사이즈에 도달하면 네임노드에서 데이터노드 목록 요청 / 검색2\. 클라이언트는 데이터노드에서 데이터노드로 연결되는 파이프라인 구성. 첫번째 데이터 블록을 첫번째 데

2022년 11월 20일
·
0개의 댓글
·