• 요약

HDFS 파일 시스템에서 용량을 확보하기 위해서는 휴지통도 비워야 한다.

문제 상황)

여러 번 실습을 반복하는 과정에서 어느 순간 Data가 업로드가 되지 않았다.

HDFS 가용 공간은 (30GB*3) 총 90GB 로 현재 프로젝트를 진행하는데 문제없는 용량이었다.

지금은 용량이 11G 정도로 보이지만 내가 오류를 겪었을 때는 600MB 정도 밖에 남아있지 않았다.

그러니 5GB 용량의 데이터 셋을 hdfs에 업로드 하려고 해도 업로드가 되지 않았던 것이다…

문제 해결 과정)

시도1

HDFS에 있는 파일을 삭제했다. 기존에 실습 과정에서 테스트 과정도 여러 번 진행하는 바람에 불필요한 데이터가 쌓였다고 생각했다.

결과1

하지만 여전히 같은 이유로 데이터가 업로드 되지 않았다…(왜?????왤까???????뭔가를 놓쳤나???)

시도2