profile
느리지만 확실하게 🐢
post-thumbnail

[논문리뷰] BART (ACL, 2020)

Self-supervised learning으로써 token이 무작위로 mask되었을 때 이를 복원하도록 학습시키는 Masked LM approach들이 큰 성과를 거둠 → 하지만, 현재 approach들은 특정 task(e.g. span prediction, gene

2022년 7월 5일
·
0개의 댓글
·
post-thumbnail

[논문리뷰] Pegasus (ICML, 2020)

Pre-training objectives tailored for abstractive text summarization have not been exploredLack of systematic evaluation across diverse domainsLarge-sc

2022년 7월 5일
·
0개의 댓글
·

Auto-regressive

Auto-Regressive Auto-Regressive스스로의 회귀자기 자신의 과거를 되돌아간다자기 자신을 입력 데이터로 하여 스스로를 예측하는 모델이전 상태의 정보를 기반하여 예측을 수행하는 모델AR model에서 현시점의 data는 이전 시점의 모든 데이터와 de

2022년 4월 13일
·
0개의 댓글
·

Autoencoders

Manifold란 고차원 space에 있는 data를 나타낼 수 있는 저차원 subspace를 말한다. 그러므로 manifold learning이란 고차원 data를 잘 아우르는 subspace가 있다는 가정 하에 학습을 진행하는 방법을 의미한다. : 입력과 출력이 동

2022년 4월 7일
·
0개의 댓글
·

[논문 리뷰] Attention Is All You Need

Transformer에 대해 개인적으로 궁금했던 점들

2022년 3월 4일
·
0개의 댓글
·

Regularization과 Normalization

모델에 제약(penalty)를 주는 것이다. perfect fit을 포기함으로써(training accuracy를 낮춤으로써), potential fit을 증가시키고자(testing accuracy를 높이고자)하는 것이다.오른쪽 그래프를 보면 모든 training da

2022년 2월 20일
·
0개의 댓글
·

[논문읽는법] Abstract와 Introduction 차이

목적 : 독자에게 연구가 필요한 이유, 연구 목적, 사용된 주요 dataset과 method, 결과와 결론을 간결하게 추려내어 제공하는 것용도 : 독자는 abstract를 읽는 것만으로도 본 논문의 주제와 연구 내용을 이해한 후 논문을 더 자세히 읽을 것인지 결정분량

2022년 2월 8일
·
0개의 댓글
·

[논문 리뷰] Seq2Seq Learning with Neural Networks

나의 Review Abstract 기존 DNN의 한계점 : sequence와 sequence를 매핑하는데 사용할 수 없음 이 논문에서는 문장 구조에 대한 최소한의 가정만 하는 sequence learning에 관한 end-to-end approach를 제시한다.

2022년 1월 10일
·
0개의 댓글
·

공공데이터 청년인턴 서류/면접 후기

2021년 공공데이터 청년인턴 2차 모집을 지원하게 되었다. 공공데이터 청년인턴쉽이란? 행정안전부와 NIA에서 데이터 전문인력 양성을 목적으로 청년들에게는 행정기관의 실무경험 기회를 제공하고 기관에는 공공데이터의 발굴·구축·개선 등 데이터 업무를 수행할 인력을 지

2022년 1월 10일
·
0개의 댓글
·

[Linux] 프로세서 제어 명령어

리눅스에서 현재 백그라운드, 포그라운드로 작업 중인 프로세스들을 관리하기 위해 jobs, fg, bg, kill, Ctrl+Z 명령어를 제공한다. Ctrl + Z는 현재 작업하고 있는 프로세스를 일시 중지하고 빠져나간다.jobs는 일시 정지한 프로세스 리스트를 확인한다

2021년 12월 17일
·
0개의 댓글
·

What is SSH?

Secure Shell Protocol remote된 머신(Host 컴퓨터)에서 쉘을 수행하기 위해 사용하는 암호화시키는 프로토콜이다. 뜻 그대로 보안 Shell이다. 기존의 Unix System Shell에 원격 접속하기 위해 사용하던 Telnet은 암호화가 이루

2021년 12월 14일
·
0개의 댓글
·

[Python] __name__ 이란?

\_\_name\_\_ 개념을 설명하기 전 Python에서 모듈이라는 개념을 이해해야 한다. 모듈은 함수, 변수, 클래스를 모아 놓은 파일이다. 즉, 다른 Python 프로그램에서 호출하여 사용할 수 있게끔 만든 파이썬 파일이다. 우리는 Python 프로그래밍을 할때

2021년 12월 7일
·
0개의 댓글
·

다익스트라 알고리즘

최단경로(Shortest Path) 탐색 알고리즘으로 하나의 정점에서 출발했을 때 다른 모든 정점으로의 최단 경로를 구하는 알고리즘이다. 다만, 음의 간선을 포함할 수 없다. 플로이드 워셜 알고리즘과의 차이점은 다익스트라는 하나의 정점에서만 최단거리를 구하지만 플로이드

2021년 11월 12일
·
0개의 댓글
·

Python3 vs Pypy3

백준에서 문제를 풀 때 Python 언어를 선택하는 경우 Python3과 pypy3가 있다. 이 두 언어의 차이점은 무엇일까? 차이점을 알아보기 전에 컴파일러 언어와 인터프리터 언어가 무엇이고 이 둘의 차이점은 무엇인지 명확히 알아가야 한다. 개발자가 작성한 소스코드를

2021년 11월 12일
·
0개의 댓글
·
post-thumbnail

ML/DL 주요 학회지

컴퓨터연구정보센터>대회안내에 날짜별, 국내/외별로 검색할 수 있으니 참고 바란다.NIPS, ICML, ICLR가 3대 학회지로 불린다.Neural Information Processing Systems매년 12월 개최최고권위 학회로 유명하며, 1987년부터 개최. 계산

2021년 11월 10일
·
0개의 댓글
·
post-thumbnail

[백준] 2457번 공주님의 정원

https://www.acmicpc.net/problem/2457그리디 문제 중에서 쉬운 축에 속하는 것 같다. 필요한 변수는 꽃을 저장하는 List와 선택한 꽃들의 갯수 count이다. 꽃은 Flower 클래스로 날짜는 Date 클래스를 선언하였다. 각각

2021년 11월 10일
·
0개의 댓글
·
post-thumbnail

[OS] 면접 준비

CS 면접을 준비하면서 정리했던 내용들입니다. 개인적으로 프로세스, 스레드, CPU 스케줄링(선점/비선점), 메모리 관리(virtual memory, paging) 부분은 정말 중요한 부분인 것 같습니다. 면접에서 꼬리물기 식으로 이어지니 꼭 자세히 파고들면 좋을 것

2021년 11월 6일
·
0개의 댓글
·
post-thumbnail

[OS] What is OS?

운영체제는 HW가 SW와 통신하고 작동하도록 하는 SW이다. 하드웨어를 관리할 뿐만 아니라 응용 프로그램이 실행되기 위한 환경을 제공한다. 예를 들어, OS가 수행하는 일 중 하나는 컴퓨터 시스템을 사용하기 위한 인터페이스이다. OS는 컴퓨터 시스템의 정확한 동작을

2021년 11월 4일
·
0개의 댓글
·
post-thumbnail

[백준] 2957번 이진 탐색 트리

https://www.acmicpc.net/problem/2957이진 탐색 트리의 삽입의 성질을 제대로 이해해야 풀 수 있는 문제이다. 만약 제시된 pseudo code대로 문제를 푼다면 시간초과가 발생한다. 왜냐하면 최악의 경우 30만개가 1부터 30만부터

2021년 11월 3일
·
0개의 댓글
·
post-thumbnail

[백준] 11438번 LCA 2

https://www.acmicpc.net/problem/11438Tree 상에서 두 정점 u,v가 있을 때, u의 조상이면서 v의 조상인 노드들 중 가장 깊은 노드를 찾는 것이다. 아래의 예시에서, 10번과, 14번의 LCA는 2번이다. ✔ 희소 테이블 :

2021년 10월 30일
·
0개의 댓글
·