멀티모달 RAG 기반 차량 정보 AI 어시스턴트

Problem

• 기존 고객 응대 시스템이 FAQ 및 Rule-based 방식에 머물러 있어 다양한 사용자 질문 대응에 한계 존재
• 수백 페이지에 달하는 차량 매뉴얼 구조로 인해 필요한 정보 탐색이 어려움
• 고객센터 의존도가 높아지는 비효율 발생
• AVN(차량 인포테인먼트) 시스템 UI가 직관적이지 않아 사용자 혼란 발생

Methodology & Results

• 차량 매뉴얼 기반 질의응답을 위해 Hierarchical RAG 구조 설계
• 사용자 질문에 대해 정확한 문서 검색 및 응답 생성 가능하도록 개선
• AVN 화면 이미지 입력 기반 위치 인식 시스템 구축 (OCR + BM25 활용)
• 사용자 의도를 기반으로 목표 페이지 예측 모델 설계
• LCA 기반 개선 로직을 적용하여 최적 경로 탐색 및 단계별 조작 안내 구현
• AVN 페이지 위치 인식 정확도 100% 달성
• 최종 페이지 예측 정확도 94% 달성 및 실제 차량 환경에서의 활용 가능성 확인