공부한 외부 url

김정학·2024년 4월 12일
0

airflow dag 폴더 sync
https://airflow.apache.org/docs/helm-chart/stable/manage-dags-files.html
-> webserver는 최근에 싱크 안 해도 괜찮아졌는데, worker랑 scheduler는 싱크가 필요함

airflow architecture 자료
https://airflow.apache.org/docs/apache-airflow/2.8.3/core-concepts/overview.html
-> 이게 메타db executor 등등 제일 깔끔하게 설명해주는 듯

celery
https://velog.io/@junsu1222/Celery%EC%99%80-Message-Broker
-> 개념 정도

airflow executor 공부
https://magpienote.tistory.com/225
-> executor의 대략적인 종류
https://airflow.apache.org/docs/apache-airflow/2.6.3/core-concepts/executor/celery.html
-> celery

airflow hivesensor 개발 도중 kinit 적용 방법
https://wookiist.dev/174, https://airflow.apache.org/docs/apache-airflow/2.6.3/core-concepts/executor/kubernetes.html#pod-override
-> pod override로 init_container, volume share로 krb5ccache 사용

git-sync docker image
https://airflow.apache.org/docs/apache-airflow/2.6.3/core-concepts/executor/kubernetes.html#example-pod-templates
-> git sync 이용한 방법
https://github.com/kubernetes/git-sync/tree/release-3.x?tab=readme-ov-file,
-> git sync 적용하기 위해 참고한 parameter 전달 방법

git 인증
https://juno-juno.tistory.com/48
-> token은 비밀번호로 인증하는 것. ssh는 키로 인증하는 것. id_rsa.pub은 퍼블릭 키임.

kerberos
https://juhi.tistory.com/75
-> kerberos 인증 방법

service, ingress 설명이 잘 되어 있는 자료
https://sunrise-min.tistory.com/entry/Kubernetes-NodePort-vs-LoadBalancer-vs-Ingress
-> 개념 정리
https://velog.io/@dojun527/%EC%BF%A0%EB%B2%84%EB%84%A4%ED%8B%B0%EC%8A%A4-%EC%9D%B8%EA%B7%B8%EB%A0%88%EC%8A%A4Ingress
-> 실습 진행
https://jangcenter.tistory.com/127
->인그레스 컨트롤러의 역할 확인. 클러스터의 인그레스 리소스를 관리 -> Ingress를 실현할 구현체

http, https port관련 자료
https://johngrib.github.io/wiki/why-http-80-https-443/
-> 그냥 하면 80 포트로 들어감

profile
멋진 내가 되자

0개의 댓글