# 파이프라인
KT 에이블스쿨 75일차(1)
오늘은 MLflow에 대해 배웠습니다. MLflow는 사기입니다.사이킷런에서 MinMax 스케일링을 사용할려면 reshape 전에 스케일링을 하고 reshape를 해야합니다.머신러닝을 진행하면 모델의 관리와 모델 배포에 대한 고민이 있습니다. 추적이란 중요한 정보를 기
KT 에이블스쿨 74일차(1)
오늘부터 마지막 미니프로젝트에 들어갔습니다.CRISP-DM비지니스 문제 이해데이터 이해데이터 전처리모델링평가배포ML코드만으로 시스템을 구축할 수 없어서 주변에 방대하고 복잡한 인프라가 있습니다.MLOps란 기계 학습 운영을 위한 프로세스, 도구 및 방법론입니다. 기계
[CI/CD] Jenkins 와 Nginx 를 활용한 Blue/Green 자동화 배포 아키텍처를 수동으로 구축하기 (feat. SpringBoot)
파이프라인을 직접 구축해서 Blue/Green 아키텍처를 설계해보자! 🧐 (배포 플러그인 미사용!)
깃랩&젠킨스 넥사크로 빌드 및 배포
현재 프로젝트는 프론트엔드는 넥사크로를 사용하여 넥사크로 빌드, 메이븐 빌드 scp를 통한 배포하도록 구성했다
Kubernetes in Jenkins Pipeline
쿠버네티스 파드의 젠킨스에서 파이프 라인으로 빌드 및 배포하기Dashboard > Jenkins 관리 > CredentialsImages registry 로그인 용 Crendential 만들기Add Credentials새로운 Item > Pipeline10번의 시도 끝
[파이널 프로젝트] Frontend CI/CD 파이프라인
1 파이프라인 코드 작성Jenkins를 이용해 파이프라인을 구축할 것이다. 우리 프로젝트는 front가 2개이기 때문에 admin 페이지 하나를 먼저 진행한 이후 나중에 user용도 구현할 예정이다. Jenkinsfile 작성에 앞서 플러그인관리에 들어가 NodeJS
[파이널 프로젝트] Backend CI/CD 파이프라인 & Vue-Nginx 연동
CI/CD 파이프라인 구축에 앞서 일단 지금까지 개발한 코드가 정상적으로 빌드되는지 테스트를 하기로 하였다.이전에 진행했던 백엔드 코드를 도커라이징한 과정을 그대로 실행하였다.개발자가 기능을 추가하는 과정에서 git에 새로운 디렉터리들을 추가하였었고, 처음에는 초기 개
Decision Tree(Feat. Wine)
DecisionTree, Wine, MinMaxScaler, StandardScaler, RobustScaler, PipeLine, 하이퍼파라미터, KFold, GridSearchCV
프로젝트 CD 적용기 2 - 젠킨스 파이프라인 작성
첫 배포를 하기 위해서 CD(지속적인 배포 Continous Delivery)까지 적용을 하려고 했다. 이전 글에서 배포용 ec2 와 RDS 관련 설정을 해주었다.현재 내 프로젝트의 작업 순서를 보면 다음과 같다.
[P1] 실시간 데이터 파이프라인 구축 프로젝트
23년도 첫 사이드 프로젝트를 진행해보고자한다.기본적인 아키텍처는 다음과 같다.프로젝트 개요1\. 데이터 수집: 트위터 API, 구글 API 등을 이용하여 실시간 데이터를 수집합니다.2\. 데이터 적재: 수집한 데이터를 데이터베이스(ex: Apache Cassandra
카프카 1 - 아파치 카프카 시작하기
출처 : 데브원영 - 아파치 카프카 강좌 카프카 설치 EC2 인스턴스에 들어가서 카프카 설치 설정 조작 server.properties broker.id=0 (24열) : 브로커 고유값. 클러스터로 형성할 시 각각의 아이디가 달라야 한다. 34열 주석해제하기
CI/CD & 파이프라인
CI/CD는 약어로, 몇 가지의 다른 의미를 가지고 있다. CI/CD의 "CI"는 개발자를 위한 자동화 프로세스인 지속적인 통합(Continuous Integration)을 의미한다. CI를 성공적으로 구현할 경우 애플리케이션에 대한 새로운 코드 변경 사항이 정기적으로
빠른 CPU를 만들어보자!(2) : 명령어 병렬 처리 기법
시간을 알뜰하게 쓰며 CPU의 명령어들을 처리할 수 있는 방법이 있을까?명령어가 처리되는 과정을 비슷한 시간 간격으로 나누면? \- 1. 명령어 인출 \- 2. 명령어 해석 \- 3. 명령어 실행 \- 4. 결과 저장 \- 같은 단계가 겹치지만 않는다면 CP
네트워크(4) 파이프라인 & 쿠키
초기의 HTTP 버전은 HTTP 통신을 한번 할 때마다 TCP에 의해 연결과 종료를 해야했다.당시의 통신에서는 작은 사이즈의 텍스트를 보내는 정도였기 때문에 별다른 문제는 없었다.그러나 HTTP가 널리 보급되어가면서 다량의 이미지를 포함한 문서 등이 늘어나게 됐다.하나