profile
구르는돌

[CKA]자격취득 준비

CKA는 Certified Kubernetes Administrator의 약자로 컨테이너 관리도구인 Kubernetes의 관리 역량을 검증해주는 자격증입니다.udemy-certified Kubernetes Administrator (CKA) with Practice T

2021년 12월 14일
·
0개의 댓글
·
post-thumbnail

[TIL]FastAPI + Scrapy

비동기 프레임워크인 FastAPI에서 Scrapy를 결합한 서비스를 개발할 때 연동시Crawler를 동작시키고 나면 서버가 멈추는 문제가 발생.그걸 일단 해결한 방법과 차후 자세히 알아보기 위한 자료들 정리.ArchitectureFastAPI내 processpoolex

2021년 12월 14일
·
1개의 댓글
·

[Semantic Retrieval]정리

Sentence TransforemrsKorNLUDatasetsKLUE/STS,NLIhttps://github.com/deepset-ai/haystack/blob/master/haystack/modeling/training/dpr.pyhttps://g

2021년 12월 6일
·
0개의 댓글
·

[TIL]Periodic Web Scraping

웹 크롤링과 웹 스크래핑의 차이점업무상 scraping application을 개발을 진행하게 되었다.일회성뿐 아니라 주기적으로 scraping하여 최신성을 유지하는 것도 기능목표이다.Scraping을 위해 BeatifulSoup , scrapy, selenium를 조

2021년 12월 6일
·
0개의 댓글
·

[CHATBOT]관련 Medium 글정리

Lowcode I/F 챗봇관련 ★ 대부분의 챗봇 솔루션에서 보이는 lowcode ,multi-stage측면으로 설명이 잘 되어있다.2020/6/1 comparison-of-eight-chatbot-environments2021/3/10 the-conversational

2021년 11월 1일
·
0개의 댓글
·

[TIL]search cluster using docker container not docker compose

제목 그대로다. elasticsearch든 opensearch든 cluster구성시 모든 예제가 docker-compose로 작성되어있다.docker-compose내용을 나누어 각각의 container로 띄우기는 쉽지 않다.나만 그렇진 않았을 것이다.아래 블로그에서 가

2021년 11월 1일
·
0개의 댓글
·

[TIL]파이썬 가상환경

pyenv를 이용한 여러 개의 Python 버전 관리하기 + 가상 환경 만들기(ubuntu) 파이썬에서 venv로 가상 환경 사용하기

2021년 10월 23일
·
0개의 댓글
·

[TIL]파이토치 딥러닝 프로젝트 모음집_국민청원분류

한 줄씩 따라 해보는 파이토치 딥러닝 프로젝트 모음집책 내용을 colab을 통해 작성 및 실행크롤링 : API형태로 변경 : lovit님의 청와대 국민청원 데이터셋데이터 전처리토크나이징 및 변수생성 : konlpy(Twitter) -> pynori단어 임베딩 : wo

2021년 10월 22일
·
0개의 댓글
·

[TIL]파이토치 딥러닝 프로젝트 모음집_MNIST_PLANT_LEAF

책 내용을 colab을 통해 작성 및 실행출판사 : https://github.com/bjpublic/DeepLearningProject/tree/main/mnist_exampleMy Colab : https://colab.research.google

2021년 10월 17일
·
0개의 댓글
·

[TIL]Elasticsearch Upgrade and Migration

Migration은 Data만을 이관 , Upgrade는 인프라 변경에 필요한 인증 등 내용필요한 케이스는 아래와 같았다.Elasticsearch에서 Opensearch로 데이터 이관Opensearch Minor Versio Upgrade아래 조사한 내용을 바탕으로 각

2021년 10월 11일
·
0개의 댓글
·

[TIL]Elasticsearch, Opensearch and ODFE...

https://aws.plainenglish.io/the-difference-between-elasticsearch-open-distro-and-opensearch-d43c9a2c31b1?gi=e79f8d8bd81ahttps://www.instaclu

2021년 10월 5일
·
0개의 댓글
·

[TIL]형태소 분석기 사용자 사전 사용하기

사용자 사전의 단어(word)는 크게 단일어와 복합어로 구성된다12(여기서 융합 합성어는 복합어가 아닌 단일어로 취급한다). 위와 같이 단일어는 홀로 명시하고 복합어는 원형어 다음에 형태소(낱말)들을 띄어쓰기와 함께 나열한다.1(사용자 사전을 정의할 때 주의할 점이 있

2021년 10월 3일
·
0개의 댓글
·