01 멘토 소개
노경완
- 머신비전 기반의 로봇, 헬스케어, 산업용 자동화 장비 개발 경력 20년 이상
- 개발 및 제조 품질관리, 프로세스 혁신,
6시그마, 프로젝트 관리 등
김현태
- IoT/Cloud/Data 솔루션 사업 기획/개발
- 유무선 인터넷 서비스 기획 및 시스템 개발
02 프로젝트 소개
① 기존 로봇 제품에 탑재된 Vision AI 소프트웨어 기능 개선 및 신규 기능 개발
▶ 신규/개선 필요 기능 (예시적 나열)
- 카메라 시야 내 군중에 대한 마스크 착용 여부 검사 (부분적으로 몸이 겹쳐진 사람들 고려)
- 카메라 시야 내 군중의 인원수/인접도 계산 (부분적으로 몸이 겹쳐진 사람들 고려)
- 카메라를 향해 손 흔드는 사람을 marking하고 응답 하기(음성 인사)
- 로봇 전면에서 "안녕", "Hello" 등의 음성이 인식되면 바로 응답 하기 (음성 인사)
- 카메라 전면 6m 이내, 가장 앞에 있는 사람 영상에 가상의 의상/장식 등 부착 혹은 얼굴만 분리하여 AR 스티커 등 효과 설정 (대상자의 움직임에 연동하여 동작)
- Depth Camera로 인물에 대해 3D modeling하고, 결과물을 3D avatar로 보여주기
(※ 단, source video는 카메라가 탑재된 PC(로봇)에서 capture하고, 3D model은 분리된 server에서 processing하도록 구성)
- (option 1) 카메라 전면에서 1명이 회전하면 스캐닝하기
- (option 2) 복수의 depth camera를 이용하여 스캐닝하기
- 로봇 전면 Touch screen을 누른 사람의 얼굴을 3D로 모델링
- 결과물을 email로 당사자에게 전송
- 결과물에 대한 3D Printing 서비스 연계 제공
- 로봇의 카메라 앞으로 사람이 접근하면, 로봇 전면 모니터를 통해 3D Avatar로 인사하기
- 손가락이 가리키는 위치와 동작을 인식하여 로봇 전면 모니터에 손대지 않고 멀리서도 터치와 같이 조작할 수 있는 가상 터치 기능 제공 (예시: Gestoos SDK)
- 로봇 전면 카메라 앞으로 사람이 접근하면 해당 인물의 동작에 반응한 영상 효과 표시
(예시: 로봇 본체에 부착된 Addressable LED들을 폭포수 혹은 파도 같이 점등)
② 개발용 시스템 구성 (예시)
- Touch형 모니터 (24" 이상 / VESA Mount / HDMI Input / USB Input)