논문 리뷰
1.Transformer, Attention Is All You Need
Transformer는 CNN, RNN 계열의 신경망 구조를 탈피한 Attention 메커니즘만으로 구현한 딥러닝 모델이다.
2021년 11월 19일
2.RefSum (Liu et al., 2021, NAACL)
💡 기존 2-Stage Learning의 한계를 완화한 패러다임 제안
2021년 11월 19일
3.MatchSum, Extractive Summarization as Text Matching
Extractive Summarization as Text Matching 논문 리뷰
2021년 11월 19일
4.Fast Abstractive Summarization with Reinforcement Learning
Fast Abstractive Summarization with Reinforce-Selected Sentence Rewriting 논문 리뷰
2021년 11월 22일
5.AMR, Abstract Meaning Representation
Abstract meaning representation for sembanking 논문 리뷰
2021년 11월 22일
6.Microsoft XiaIce Chatbot
Microsoft의 소셜 챗봇 XiaoIce의 프레임워크를 소개한 논문 리뷰
2021년 11월 25일
7.GSum (Dou et al., 2021, NAACL)
가이드를 활용하기 위해 확장된 텍스트 요약 프레임워크, GSum 논문 리뷰
2021년 12월 3일
8.Poly-Encoder (Humeau et al., 2020, ICLR)
Facebook의 Poly-Encoder 논문 리뷰
2021년 12월 6일
9.DeBERTa (He et al., 2021, ICLR)
Microsoft의 DeBERTa 논문 리뷰
2021년 12월 19일
10.FLAN (Wei et al., 2021, arXiv)
Google의 FLAN 논문 리뷰 (Under review in ICLR 2022)
2021년 12월 23일
11.Perceiver IO (Jaegle et al., 2022, ICLR)
DeepMind의 Perceiver IO 논문 리뷰 (ICLR 2022)
2022년 5월 27일
12.SimCLS (Liu and Liu, 2021, ACL)
SimCLS: A Simple Framework for Contrastive Learning of Abstractive Summarization 논문 리뷰
2022년 6월 29일
13.SLiC (Zhao et al., 2022, arXiv)
Google의 SLiC 논문 리뷰 (preprint, 2022)
2022년 11월 8일
14.T0 (V. Sanh et al., 2022, ICLR)
Multitask Prompted Training Enables Zero-Shot Task Generalization 논문 리뷰
2022년 11월 8일