Today I Learned

프로젝트 실험 정리

---

실험 별 성능 비교

SASRec vanilla

번호	실험내용	hitrate@10	ndcg@10	실험위치	cold 여부
1	기본 vanilla	0.204292	0.088568	result_sasrec_1	콜드유저가 존재 x
3	기본 최근17제거	0.264252	0.117395	result_sasrec_4	그래프에서 콜드 문제 없음
5	4.0이상 vanilla	0.190186	0.09956	result_sasrec_7	3~9까지 콜드
7	4.0이상 slicing vanilla	0.161631	0.087386	slicing_sasrec_8	3~9까지 콜드
9	full slicing 최근17제거 vanilla	0.194606	0.101562	slicing_sasrec_10	3~15까지 콜드

• Vanilla 실험별 성능 비교

SASRec +3000

번호	실험내용	hitrate@10	ndcg@10	실험위치	cold 여부
2	기본 3000	0.30512	0.134749	result_sasrec_2	콜드유저가 존재 x
4	기본 최근17제거	0.405667	0.180714	result_sasrec_6	ndcg 그래프에서 콜드문제 없음
6	4.0이상 3000	0.273952	0.158297	result_sasrec_9	3~9까지 콜드
8	4.0이상 slicing 3000	0.233136	0.135107	slicing_sasrec_9	그래프에서 콜드문제 없음
10	full slicing (최근17제거) 3000	0.316983	0.180636	slicing_sasrec_12	3~15까지 콜드

• +3000 실험별 성능 비교

• 9번의 ndcg@10

• 9번 지표(0.194606)로 봤을때 count 15까지가 cold

count	hitrate@10	ndcg@10	mrr@10
3	0.162996	0.078365	0.053072
4	0.163975	0.079122	0.053790
5	0.193683	0.097671	0.068721
6	0.167612	0.083245	0.057795
7	0.179943	0.091653	0.065147
8	0.198822	0.106516	0.078505
9	0.203252	0.111403	0.083591
10	0.203273	0.102650	0.072443
11	0.187990	0.093509	0.065293
12	0.198011	0.108375	0.081395
13	0.189068	0.097084	0.069721
14	0.190476	0.098759	0.071677
15	0.183280	0.094173	0.067340
16	0.210757	0.110905	0.080774
17	0.241461	0.134385	0.102041
18	0.263039	0.144263	0.108044
19	0.324111	0.167994	0.120984
20	0.310433	0.172142	0.130282