# AI Tech

82개의 포스트

NLP P stage Day 5, 10/1 Fri

KLUE 5강 강의

2021년 10월 3일
·
0개의 댓글

NLP P stage Day 3, 9/29 Wed

KLUE RE Baseline 분석

2021년 10월 3일
·
0개의 댓글

NLP P stage Day 2, 9/28 Tue

KLUE RE 대회 요약

2021년 10월 3일
·
0개의 댓글

NLP P stage Day 1, 9/27 Mon

KLUE RE baseline code 분석

2021년 10월 3일
·
0개의 댓글
post-thumbnail

부스트캠프 AI Tech Week8 회고

부스트캠프 AI Tech Week8 회고

2021년 9월 24일
·
0개의 댓글

NLP Day 10, 9/17 Fri

Transformer review

2021년 9월 18일
·
0개의 댓글

NLP Day 8, 9/15 Wed

Self-supervised Pre-trained Models

2021년 9월 18일
·
0개의 댓글

NLP Day 7, 9/14 Tue

GPT-1, BERT

2021년 9월 17일
·
0개의 댓글
post-thumbnail

NLP Day 6, 9/13 Mon

Transformer

2021년 9월 17일
·
0개의 댓글

NLP - Day 5, 9/11 Fri

필수과제 3 Subword level Language Model

2021년 9월 11일
·
0개의 댓글

NLP - Day 4, 9/10 Thu

Beam Search, BLEU score

2021년 9월 11일
·
0개의 댓글

NLP - Day 3 9/9, Wed

Seq2seq, Attention

2021년 9월 11일
·
0개의 댓글

NLP - Day 2, 9/7 Tue

RNN, Language model

2021년 9월 11일
·
0개의 댓글

NLP - Day 1, 9/6 Mon

Intro to NLP, Word Embedding

2021년 9월 11일
·
0개의 댓글

9/2 목, P stage 9일차 학습정리

관련 내용 정리 Ensemble Voting: 투표를 통해 결과를 도출 서로 다른 알고리즘이 도출해낸 결과물에 대해서 투표하는 방식 1) Hard voting 최종 결과물에 대해서 투표해서 결정한다. 2) Soft voting 최종결과물이 나올 확률값을 다 더해서 최종결과물에 대한 각각의 확률을 구한 뒤 최종값을 도출해낸다. Bagging: Bootstr...

2021년 9월 2일
·
0개의 댓글

9월 1일 수요일, P stage 8일차 학습정리

과제 수행 과정/ 결과물 정리 Discussion 정리 Cutmix 활용 - 최석민 facecrop + Retinaface - 안영진 Class imbalance 해결 - 진명훈 스코어 재현을 위한 seed 설정 - 김다인 train, test set 나눌 때 class도 같이 나누기 - 김진용 early stopping 관련 - 이유진 K Fold Cr...

2021년 9월 1일
·
0개의 댓글

8/30 월, P stage 6일차 학습정리

과제 수행과정 / 결과물 정리 3. Basic Team: 대웅, 요한, 준수, 호영, 한준 Pretrained model : 대강 성능 파악 Augmentation : 적절한 방법 대강 파악, 요한 Jupyter 새로 파서 실험 용이하게 할 것 다음에 대해서 비교 실험 : backbone : Effifcient Net Loss : Focal...

2021년 8월 31일
·
0개의 댓글

8/31 화, P stage 7일차 학습정리

과제 수행과정 / 결과물 정리 Model EfficientNet b0 compound coefficient NAS(Neural Architecture Search, 강화학습을 통해서 최적의 모델 구조를 찾아내는 법)를 이용해서 baseline network를 설계하였다. Width, Depth, Resolution 모두 증가시켰을 때 가장 성능이 크게 증...

2021년 8월 31일
·
0개의 댓글

P stage - Class imbalance problem

마스크 분류 데이터셋에서 데이터 불균형이 발생한다. 성별 불균형 연령 불균형 마스크 착용 불균형 마스크 착용 : 비정상 착용 : 미착용 = 5:1:1 Multi-Class Imbalance 처리 Undersampling overfitting 위험도가 커지고 데이터 손실이 발생해서 대부분 잘 하지는 않음 Oversampling 소수 class의 데이터...

2021년 8월 28일
·
0개의 댓글

Week 4 - 8/27 금, P stage 5일차 학습정리

피어세션 정리 대웅 : weights & biases 기능 추가 한진 : 대학원 관련 내용 공유, 멀티 모델 시도 내용 공유 요한 : 멘토님 답변 내용 공유 Data Augmentation을 적용했을 때 성능 좋은 단일 모델을 빨리 찾아 다음주부터 앙상블 K-fold로 여러개의 모델을 만들고 앙상블하면 성능이 좋다 앙상블시, 큰 모델과 작은 모델을 섞...

2021년 8월 28일
·
0개의 댓글