1. 프로젝트 개요
- 프로젝트명 : 데이터 품질 모니터링 시스템 구축
- 도입 배경 :
- 예약 정보 오류, 중복 티켓 및 부정 이용의 때늦은 확인으로 발생하는 금전 손실 등 운영 리스크 감소를 위한 자동 품질 체크 시스템 구축
- 품질 체크를 통한 골드 테이블 확보
- 주요 목적 :
- 데이터 기반 의사결정 신뢰성 확보
- 예약 오류 선제 대응 및 고객 만족도 제고
- 협력사 신뢰 확보를 위한 SLA 기반 대시보드 제작
2. 목표 및 KPI
-
목표
- 전일 주문 데이터 당일 품질 검사를 위한 프로세스 구축
- 데이터 품질 확보
- KPI 확인을 위한 실시간 데이터 반영 대시보드 제작
-
KPI
| 지표명 |
목표 |
측정기준 |
| 정확성(Accuracy) |
1건 미만 |
상품 발행 데이터(원본)와 발급 데이터 비교 |
| 완전성(Completeness) |
1건 미만 |
필수 필드(이름,연락처 등) 데이터 확인 |
| 고유성(Uniqueness) |
1건 미만 |
중복 데이터 발생 여부 확인 |
| 유효성(Validity) |
1건 미만 |
비즈니스 규칙 위반 데이터 발생 여부 확인 |
| MTTA (평균 인지 시간) |
당일 오전 이내 |
해결 완료까지 소요 시간 |
| MTTR (평균 해결 시간) |
당일 처리 |
해결 완료까지 소요 시간 |
3. 기능 요구 사항
- 전일 주문 데이터에 대한 적재 자동화
- 데이터 품질 검사(DBT Test) 자동화
- 품질 규칙 : 정확성(Accuracy), 완전성(Completeness), 고유성(Uniqueness), 유효성(Validity) 적용
- 대시보드 연동하여 KPI 지표 실시간 반영
4. 비기능 요구사항
- 데이터 적재 및 1차 품질 검사(BDT Test)는 전일 주문 데이터를 대상으로 당일 오전 12시에 하루 1회 실시
- 오류 데이터 확인 및 수정 후 2차 품질 테스트는 당일 데이터가 아닌 전체 데이터를 대상으로 진행한다.
- 2차 품질 테스트는 Dataplex로 진행하며 데이터 품질 검사 기준은 자동화된 DBT Test의 기준과 같다.