Research notes and engineering write-ups from CHEON:AI.
1 post tagged “evaluation” Clear
Sep 30, 2026·Tutorial
공개 RAG 검색 데이터셋 AutoRAG(질문 114개, 문단 720개)에서 BM25 상위 10개를 체온 리랭커(cheon-reranker-0.6b-v1)로 다시 줄 세웠더니 nDCG@10이 0.857에서 0.916으로, MRR@10이 0.822에서 0.898로 올랐어요. 데이터 받기부터 지표 계산까지 파이썬 코드를 전부 붙였고, 후보를 20개로 늘렸더니 오히려 떨어진 이유도 같이 적었어요.
RSS feed