Hadoop local to HDFS

독자 대상📣

👉 Linux(Ubuntu) 환경에서 Hadoop을 사용하시는 분
👉 Local pc에서 HDFS로 파일을 옮기시려는 분

---

출간 이유❓

플랫폼 구축 중, 문제가 발생해서?😂

귀찮다고 코드 수정 안 하다가 수정한줄 착각하고 뫼비우스의 띠에 빠져서? 🤣🤣🤣

---

문제 파악🔍

Q: 분명 python에서 "Popen" 라이브러리 사용해서 
   처음에 적용한 put 명령어는 잘 됬는데, 
   그 이후로는 put이 안 되는데 왜 그러는지 아오?😥

A: Ah~ 그럼 먼저 python에서 말고, 
   Hadoop 로컬 PC에서 경이 적용한 그 역겨운 put 명령을 
   그대로 입력해보시겠소?

Q: Oh~ HolyMoly~ RolyPoly~ Guacamole~ 'File exists' 오류가 뜨오! 
   파일이 이미 존재해서 그런거 같은데... 
   어떡해야 하오?😥

---

문제 해결🎊

A: 그 역겨운 put 명령줄에 한 가지 빠진게 있소... 
   바로 -f 옵션이오. 
   이 옵션만 쓴다면 그 역겨운 커맨딩에서 향기가 나게 될 것이오.😃😃

저자는 귀차니즘으로 인해 -f 옵션 추가를 미루다가 문제 발생 시, 다른 부분에서 뺑이친 헛수고한 경험이 존재함...

나처럼 개고생말고 일단 put 옵션이 안 먹힌거 같으면 HDFS web ui 접속해서 파일의 "Last Modified" 를 확인해보시길...