아프니까 개발자다 아프니까 개발자다

왜 Ground Truth가 중요한가회사에서 RAG(Retrieval-Augmented Generation, 검색 증강 생성) 기반 챗봇을 만들었다고 해봅시다. "우리 제품 보증 기간은 얼마야?"라는 질문에 봇이 "2년입니다"라고 답했는데, 이게 정말 맞는 답일까요? 그리고 검색 과정에서 관련 문서를 제대로 찾았을까요?이런 의문을 해결하려면 정답 데이터(Ground Truth)가 있어야 합니다. 정답이 뭔지 모르면 시스템이 잘하고 있는지, 어디가 문제인지 알 수가 없거든요. 마치 시험 채점을 할 때 정답지가 없는 것과 같습니다.특히 RAG 시스템은 두 가지를 동시에 평가해야 합니다:검색 성능: 관련 문서를 제대로 찾았는가?생성 성능: 찾은 문서를 바탕으로 정확한 답변을 만들었는가?RAGAS(RAG Ass..