01 멘토 소개

성성현

5GX Location Labs

• 대학원 석사과정 Machine Learning/Deep Learning 분야 연구
• 현재 SLAM 팀에서 딥러닝 기반 Image Feature Matching 기술 개발 담당

02 프로젝트 소개

• 2D 이미지와 Cloud 서버에 저장된 3차원 Visual-Geo DB와 비교하여 정밀 측위를 제공하는 기술 연구 프로젝트
  • 3차원 Visual-Geo DB는 Visual SLAM(Simultaneous localization and mapping) 기술을 활용하여 미리 구축된다.
  • 사용자의 스마트폰을 통해 서버로 전송된 이미지를 분석하여 특징점을 추출하고, 이를 3차원 Visual-Geo DB와 비교해 위치와 방향을 제공한다.
• 목표
  • 기존 기술은 Nearest neighbor, PnP(Perspective-n-Point)와 RANSAC과 같은 알고리즘을 활용했는데, 이를 개선하는 end-to-end 딥러닝 학습 기반 추론 모델을 개발하는 것.
  • 광고판/간판 등 알고리즘 성능 저하에 기여하는 요소를 제거하기 위해 Instance Segmentation 및Detection하는 것. (따라서 임의의 모든 광고판/간판을 검출하는 것이 목표)
  • 이 기술은 추후 실내 도보 네비게이션, 위치 공유, Smart Building/Factory, 로봇/드론, 대면적 AR 서비스 등에 활용 가능하다.
• DB 형태
  • point cloud 제한적으로 제공, 가능할 시 camera pose를 포함한 image 제공

3차원 Visual-Geo DB를 활용한 카메라 위치 추정 예시(Google Maps)

03 이런 fellow를 찾습니다

• 이미지 기반 딥러닝 모델 구현 경험이 있으신 분
• 최신 딥러닝 기술 동향에 관심이 많으신 분