📒 Docker(3)

📌 Docker 명령어

1. Image

• 이미지 빌드
  • docker build --platform=linux/amd64 -t urface0411/hangman
• 이미지 검색
  • docker images
  • docker image ls
• 이미지 삭제 (Image_id or Image_name)
  • docker rmi
  • docker image rm

2. Docker Hub

• docker login -u user_id -p user_pw
• docker pull urface0411/hangman
• docker push urface0411/hangman

3. Container

• docker create
• docker run --name -p -v Image_name
• docker ps
• docker ps -a
• docker ps -p
• docker 명령어 Container_name or Containr_id
  • start
  • stop
  • restart
  • kill
  • pause
  • unpause
  • rm

4. Conatiner logs

• docker logs -f Container_name or Container_id
• docker logs --tail 100 Container_name or Container_id

5. exec

• docker run --name=hangman urface0411/hangman
• docker exec hangman cat /etc/hosts

6. Container detach & attach

• docker run urface0411/hangman
• docker run -d urface0411/hangman
  k0ka0*
• docker attach k0ka0

---

📌 Docker Volume

1. Docker Volume의 필요성

• 특적 SW가 Docker Container를 통해 일회성으로 동작하는 것이 아니라 계속해서 동작해야 한다면 데이터가 영국적으로 보관되어야 한다.

• 이를 보장하는 기능이 Docker Volume => Data Persistence이다.

• Docker Container내의 가상 파일 시스템과 호스트 시스템의 파일 시스템을 매핑한다.

  • ex) Host File System의 /home/urface/logs를 Docker Container의 /var/lib/airflow/logs로 매핑
  • 이 경우 Docker Container가 중단되더라도 모든 Airflow logs는 기록이 남게 된다.

• 즉 Container와 Host System이 특정 폴더를 공유한다.

  • Contrinaer가 없어지더라도 데이터는 남게 하는 것이다.

2. Docker Volume의 정의

• Host File System 폴더를 Docker Container File System의 폴더로 마운트하는것이다.
  • Host에서 내용을 바꾸면바로 Docker Container에도 반영된다.
  • 이를 통해서 Docker Container의 상태와 관계없이 데이터를 영구적으로 보관한다.
• File System Mount
  • 마운트란 디스크와 같은 물리적인 장치를 File System의 특정 위치(폴더)에 연결해주는 것을 의미한다.
  • ex) 윈도우에서 USB를 연결하면 내 컴퓨터에 새로운 :D 또는 :E와 같은 식으로 새로운 폴더가 생기는 것이 바로 마운트이다. (연결해보면 윈도우에서 마운트라는 말을하면 사용자에게 접근할 것이다.)

3. Docker Volume Type

• Host Volumes : docker run -v를 실행할 때 페어로 지정

  • docker run -v /home/urface/logs:/var/lib/airflow/logs
  • : 앞이 Host File System Pass이고 뒤가 Container File System Pass이다.

• Anonymous Volumes : docker run -v르 실행할 때 컨테이너 패스만 지정

  • docker run -v /var/lib/mysql/data
  • 이 방식이 Dockerfile에서 사용되는 방식으로 Host쪽에 Access되지는 않지만 재시작해도 유지된다.

• Named Volumes : docker run-v를 실행할 때 이름과 컨테이너 패스를 지정

  • docker run -v name:/var/lib/mysql/data
  • 가장 선호되는 방식이다.
  • 이 방식이 하나의 Volume을 다수의 컨테이너에서 공유하는 것도 가능하게 해준다.
  • 이 포맷으로 뒤에서 살펴볼 docker-compose에서도 사용된다.

• Volume을 ReadOnly로 지정하고 싶을 경우

  • name:/var/lib/mysql/data:ro

4. Docker Volume 사용법

• Dockerfile
  • VOLUME 명령을 통해 anonymous volume만 지정 가능
• docker-compose
  • Host Volume이나 Named Volume을 사용하는 것이 일반적이다.

5. Docker Volume 사용 예 : nginx

• docker run -d --name=nignx -p 8081:80 nginx
• Browser : http://localhost:8081/
• docker exec --user=root -it nginx sh
  • apt update
  • apt install nano
  • nano /usr/share/nginx/html/index.html (내용 편집 : Welcome to Docker Volume)
  • exit
• docker restart nginx
  • 위 과정을 반복하여 /usr/share/nginx/html/index.html 내용 확인시 원상복구되는 것을 볼 수 있다.

6. Docker Volume 사용 예 : nginx -v 옵션 사용

• ls -tl /Users/jobox/Downlads/grepp/kdt/nginx/html
  • index.html
  • test.html
• docker run -p 8081:80 -d --name nginx_demo -v /Users/jobox/Downloads/grepp/kdt/nginx/html:/usr/share/nginx/htmlnginx
• http://localhost:8081/
• index.html 내용을 수정하고 브라우저에서 재방문
• nginx를 재시작하고 내용이 유지되는지 확인

7. Docker Volume을 docker-compose.yml에서 사용한 예시

• Host File System : airflow-setup/dags
  MySQL_to_Redshift_v2.py
  UpdateSymbol_v3.py
  UpdateSymbol.py
• Docker Container File System : /opt/airflow/dags
  • docker exec Container_id ls -tl /opt/airflow/dags
    MySQL_to_Redshift_v2.py
    UpdateSymbol_v3.py
    UpdateSymbol.py
• 이 둘의 내용이 동일해야한다.

8. Docker Volume 명령어

• docker volume ls
• docker volume rm
• docker volume prune : 사용하지 않는 모든 Volume 삭제
• docker volume inspect : 특정 Volume의 내용을 더 깊게 살펴보기

---

📌 다수의 Container로 구성된 SW

1. Docker 환경 클린업 - 커맨드 라인

• Docker Desktop에서 삭제하는 것이 가장 직관적이다.
  • Image를 삭제하려면 먼저 실행 중인 Container가 없어야한다.
  • 따라서 Container를 중단한 뒤 Image를 삭제한다.
• Container 삭제
  • docker container rm ~~~
  • docker container rm -f $(docker container ls -aq)
• Image 삭제
  • docker image rm ~~~
  • docker image rm $(docker image ls -q)
• 삭제 확인
  • docker ps
  • docker images

2. Docker 환경 클린업 - Desktop에서 Troubleshoot 메뉴 사용

• Docker Desktop에서 삭제하는 것이 가장 직관적임

3. Voting application

• Docker에서 제공해주는 예제 프로그램이다.

  git clone https://github.com/dockersamples/example-voting-app

4. 매뉴얼하게 빌드하기

• docker build -t vote ./vote

• docker build -t result ./result

• docker build -t worker ./worker

• docker images

• redis와 postgres는 공식 이미지이기 때문에 빌드할 필요가 없다.

5. 매뉴얼하게 실행

• docker run -d --name=redis redis

• docker run -d -e POSTGRES_PASSWORD=password --name=db postgres

• docker run -d --name=vote -p 5001:80 result

• docker run -d --name=result -p 5002:80 result

• docker run -d --name=worker worker

• 이렇게 실행하면 동작 할까?
  -> 각 컴포넌트들간의 네트워크 연결이 안된다.

6.

7.

8. Docker Network Create

• docker container rm -f $(docker container ls -aq)
• docker network create mynetwork
• docker run -d --name=redis --network mynetwork redis
• docker run -d --name=db -e POSTGRES_PASSWORD=password --network mynetwork postgres
• docker run -d --name=vote -p 5001:80 --network mynetwork vote
• docker run -d --name=result -p 5001:80 --network mynetwork result
• docker run -d --name=worker --network mynetwork worker

---

📌 Docker-Compose로 다수의 Container 실행

1. Docker-Compose란

• 다수의 Container로 SW가 구성되는 경우 사용할 수 있는 툴 + 환경설정파일

  • docker-compose.yml로 설정
  • 여기서 다양한 테스트들도 수행가능하다.
  • 다양한 버전을 만드는 것도 일반적이다.(dev, test, prod등등)

• 개별 Container를 따로 관리하는 것보다 훨씬 더 생산성이 높다.

• 환경설정 파일의 이름은 docker-compose.yml이나 docker-compose.yaml이다.

• 하지만 그만큼 배워야할 것도 많고 복잡해진다.

• 사용법 자체는 간단하다 -> SW를 구성하는 모든 컨테이너에게 적용된다.

  • docker-compose build
  • docker-compose up -> run과 같은 기능
  • docker-compose pull
  • docker-compose ps
  • docker-compose down
  • docker-compose start
  • docker-compose stop
  • docker-compose rm

• 리눅스의 경우 docker-compose를 따로 설치해야한다.

  $docker-compose --version

2. docker-compose.yml 작성

• 다양한 버전이 존재하지만 v2와 v3가 합쳐진것을 사용하자
• services : 다음으로 프로그램을 구성하는 서비스들을 지정
  • 각 서비스는 별개의 Docker Image 지정과 Docker Container 실행으로 구성된다.
  • 각 서비스는 자신의 Dockerfile을 가지고 있어야한다.
  • 아니면 docker hub등에서 Image를 다운로드 한다.
  • 서비스 이름은 어떻게 작명하든 상관 없다.
• Volumes : 앞서 사용된 docker volume들을 지정한다.
• networks : 앞서 사용된 network들을 지정한다.

3. docker-compose vs. docker compose

• v1 : docker-compose
• v2 : docker compose
• Dokcer 1.27ver 부터 docker에 명령으로 compose가 추가되었다.
  • docker-compose 보다는 "docker compose"를 쓰는 것이 더 좋다.
  • 별도로 docker-compose를 설치할 필요가 없다.
  • 하지만 아직까지 대부분의 DOC이 docker-compose중심으로 작성되어있다.

4. docker-compose.yaml or docker-compose.yml

• docker compose 명령의 위 둘 중의 하나를 찾는다.
  • 만일 둘다 존재한다면 ERROR가 발생한다.
• 만일 다른 이름의 파일을 사용하고 싶다면 -f 옵션을 사용한다.
  • docker-compose -f docker-compose.mac.yml up
• docker-compose.yml 예시

services:
	frontend:
    	build: ./forntend
        ports:
        	- 3000:3000
    backend:
    	build: ./backend
        ports:
        	- 3001:3001
        environment:
        	DB_URL: mongodb://database/vidly
    database:
    	image: mongo:4.0-xenial
        ports:
        	- 27017:27017
        volumes:
        	- vidly: /data/db

volumes:
	vidly:
    ...
    
networks:
	...

5. docker-compose로 이미지 생성과 분리

• docker-compose build
  • build 키로 지정된 것들 대상
• docker-compose pull
  • docker hub에서 이미지들을 읽어오려고 한다.
• docker images
  • 각 개별 이미지 앞에 폴더 이름을prefix로 붙인다.(docker hub에서 읽어온 것 제외)
• docker-compose images
  • 컨테이너에 의해 실행되고 있는 이미지들만 보여준다.
• docker-compose push
  • docker hub로 이미지들을 푸시하려고 한다.

6. docker-compose로 SW 시작과 중단

• docker-compose up : build -> create -> start

  • docker-compose create
  • docker-compose start

• docker-compose down

• docker-compose stop

• docker-compose rm

• docker-compose ls
  -> docker-compose를 그룹별로 보여준다.

• docker-compose ps
  -> docker-compose로 실행된 컨테이너의 개별적 상태를 보여준다.

7. docker-compose Networking

• docker 끼리 네트워크 연결이 필요한 경우
  • services에 준 이름으로 호스트 이름이 생성된다.
  • 내부에 DNS 서버가 하나 생성되어 이름을내부 IP로 변환해준다.
• 별도로 네트워크를 구성하고 싶다면
  • networks에 네트워크를 나열하고 네트워크를 적절하게서비스에 지정해주어야한다.
• docker network ls

8. 5개의 Container를 일일히 실행했을 때의 문제점

• Postgres를 실행하는 부분이 제대로 동작하지 않았다.

  • docker run -d --name=db -e POSTGRES_PASSWORD=password --network mynetwork postgres

• worker/Progream.cs

  var pgsql = OpenDbConnection("Service=db;Username=postgres;Password=postgres;");
  var redisConn = OpenRedisConnection("redis");

• 이를 해결하려면 Container를 실행할 때 아래 2개의 환경변수를 넘겨주어야 한다.
  • POSTGRES_USER: "postgres"
  • POSTGRES_PASSWORD: "postgres"
  • 이걸 docker-compose 환경 설정 파일을 통해 넘기면서 해결해볼 예정이다.