2. 추천시스템 평가 지표
2023. 11. 29. 10:39ㆍNAVER AI Tech/Recommen System
추천시스템 평가 지표
- 비즈니스 관점 : 매출이 증가하였는가? 혹은 CTR(노출 대비 클릭)이 상승했는가?
- 품질 관점 : 연관성, 다양성, 새로움, 참신함 등에 대해 평가를 진행.
Precision / Recall
- Precision : 추천한 아이템 중에 실제 유저가 관심있는 아이템 비율
- Recall : 유저가 관심있는 아이템 중에 우리가 추천한 아이템 비율
ex) 유저가 관심있는 아이템 3개, 추천시스템이 추천한 아이템 5개 중 2개가 유저가 관심있는 아이템에 포함될 경우
Precision : 2/5, Recall : 2/3
MAP@K
- 모든 유저에 대해서 Precision@1부터 Precision@K 까지 평균.
NDCG
- cumulative gain : 상위 K개 아이템에 대하여 관련도를 합한 것. 순서에 따라 정렬하지 않고 동일하게 더한 값.
- discounted cumulative gain : 순서에 따라 cumulative gain을 discount한 것
- Ideal DCG : 이상적인 추천이 일어났을 때 DCG 값.
- Normalized DCG : 추천 결과에 따라 구해진 DCG를 IDCG로 나눈 값.
'NAVER AI Tech > Recommen System' 카테고리의 다른 글
| 6. Neighborhood-Based Collaborative Filtering (0) | 2023.11.29 |
|---|---|
| 5. TF-IDF를 활용한 컨텐츠 기반 추천 (0) | 2023.11.29 |
| 4. 연관 규칙 분석 (0) | 2023.11.29 |
| 3. 인기도 기반 추천 (0) | 2023.11.29 |
| 1. 추천시스템 개요 (1) | 2023.11.29 |