📅 [1] 기본 정보

• 날짜: 2026-04-20
• 이름: 지훈
• 팀명: (팀명 입력)

🚀 [2] 오늘 맡은 역할 및 구체적인 작업 내용

✍️ 답변:

- RAG 시스템 휴리스틱 검증 수행 (Similarity / Hybrid 기반 테스트)

- 고정 질문 세트(q75 ~ q99_f)를 활용하여 Retrieval 성능 비교 실험 진행

- [실험 1] Hybrid 검색 방식 검증
  → 일부 문서 검색 성공하였으나, 잘못된 문서 참조 및 질문 의도 불일치 문제 확인

- [실험 2] 청크 크기 확장 (chunk size 증가)
  → 검색 문서 0건 발생, Retrieval 실패 확인
  → 청크 증가 시 키워드 매칭 약화 및 검색 성능 저하 현상 분석

- [실험 3] Similarity + chunk 800 설정 검증
  → 일부 검색 성공 (1~3개)
  → 그러나 정답률 낮고 잘못된 참고(환각) 다수 발생

- 실험 결과를 표 형식으로 정리하여 성능 비교 수행
  (정답 점수, 환각 여부, 근거 적합성 기준)

- 다중 청크 실험을 위한 인덱싱 구조 개선
  → chunk size (600, 800, 1000, 1200)별 컬렉션 분리 방식 설계

- parquet 기반 인덱싱 설정 및 루프 구조 적용 방법 정리

📊 [3] 오늘 작업 완료도 체크 (하나만 체크)

• [ ] 🔴 0%
• [ ] 🟠 25%
• [ ] 🟡 50%
• [ ] 🟢 75%
• [x] 🔵 100%

📌 [4] 이슈 및 개선 필요 사항

- 청크 크기 증가 시 Retrieval 성능 급격히 저하되는 문제 확인
- 질문-문서 간 키워드 불일치로 인한 검색 실패 다수 발생
- 일부 케이스에서 잘못된 문서를 근거로 사용하는 Hallucination 발생
- Hybrid 및 Similarity 방식 모두에서 정확한 문서 매칭 부족

[5] 오늘 분석/실험 중 얻은 인사이트나 발견한 문제점