DeepLearning
1.[DL] huggingface generate 함수 configuration
https://github.com/huggingface/transformers/pull/2303https://huggingface.co/blog/how-to-generate
2023년 1월 28일
2.[neural search] HNSW 알고리즘 설명
ANN 알고리즘 중 HNSW 알고리즘에 대한 설명입니다.
2023년 6월 5일
3.[NLP] LSTM : Long Short Term-Memory
LSTM 알고리즘에 대해 설명하고 다른 알고리즘과 비교하여 장단점을 소개합니다.
2023년 6월 8일
4.[NLP] Attention & Transformer
Attention 개념과 이를 활용한 Transformer구조에 대해 설명합니다.
2023년 6월 8일
5.[NLP] BigBird 중 Sparse Self-attention
BigBird 논문 내용 중 Sparse Self-attention에 대해 설명합니다.
2023년 6월 8일
6.[NLP] BERT : Bidirectional Encoder Representations from Transformer
BERT 모델에 대해 설명합니다.
2023년 6월 9일
7.[NLP] ALBERT : A Lite BERT for Self-supervised Learning of Language Representations
BERT의 한계를 보완한 ALBERT 모델에 대해 설명합니다.
2023년 6월 9일
8.[NLP] Hungry Hungry Hippos: Towards Language Modeling with State Space Models
Hungry Hungry Hippos (H3) 논문 리뷰 입니다. 틀린 부분이 있다면 댓글로 알려주세요.
2023년 6월 29일
9.[NLP] PEFT(Parameter-Efficient Fine-Tuning)
Adaptor vs Delta Tuning를 비교하며 PEFT를 설명합니다.
2025년 9월 18일