[후기] 무인 편의점 개발기

by 사만다

안녕하세요. 카카오엔터프라이즈 AI Lab의 사만다입니다.


지난달 11월 중순 개최된 카카오 개발자 컨퍼런스 'if Kakao 2020' 세션 중 하나인 '무인편의점 개발기-Edge Device로 Object Tracking 시스템 구축하는 방법'을 소개해보고자 합니다.



무인편의점 프로젝트는 '비전(vision) 기술을 활용해 일상에서 쉽게 접할 수 있는 제품"을 만들어보자는 취지로 시작됐습니다. 여러 아이디어 중 자사가 지난 수년간 축적해온 내부 기술을 조합한 "여러 카메라를 이용한 사람 추적 시스템"이 무인편의점이라는 컨셉에 가장 부합한다고 판단, 지난 2019년 9월부터 개발을 진행하고 있습니다.


현재 카카오엔터프라이즈의 사내 공간인 '비전룸'은 무인편의점 형태로 운영되고 있습니다. 곳곳에 설치된 여러 대의 카메라가 비전룸에 입장한 사람들의 행동(공간 내 어디에 있는지, 어떤 상품을 집었는지 등)을 실시간으로 추적합니다.


AI Lab이 구성한 사람 추적 시스템은 크게 4가지 모듈로 구성돼 있습니다.

먼저 추적 대상을 찾는 person detector

대상의 관절 위치를 찾는 pose estimator

매장 내 사람의 위치를 추정하는 multi-view geometry

영상에서 사람의 위치를 실시간 추적하는 person tracker


카메라 촬영으로 획득한 영상 데이터는 사실 매우 고용량의 데이터라 서버로 전송해 이를 분석하려면 많은 시간과 비용이 듭니다. 이를 해결하고자 AI Lab은 여러 카메라에서 획득한 영상을 한 대의 엣지 디바이스로 분석할 수 있도록 하는 시스템 구축에 집중했습니다.


이 개발 프로젝트를 공동 리드한 카카오엔터프라이즈・카카오 소속 엔지니어인 김한샘(person detection), 강동오(pose estimation), 박민호(multi-view geometry), 안지운(person tracking), 임현호(system integration)를 만나 사람 추적 시스템 구조에 대한 자세한 이야기를 들어봤습니다.


현재 카카오엔터프라이즈 AI기술팀 멀티미디어처리파트에서는 이미지 분석, 동영상 분석, 얼굴 인식, 3D geometry 등 여러 분야의 컴퓨터 비전 문제 및 딥러닝 모델 경량화와 관련된 연구 및 개발을 함께 할 분을 찾고 있습니다. 관심이 있는 분은 아래 인재 영입 페이지를 참고해 주세요. 감사합니다. :)


☞딥러닝 효율화(Efficient Deep Learning) 연구 개발 전문가 영입 https://bit.ly/KEPcareer_efficientDR

☞컴퓨터비전 및 머신러닝 전문가 영입 https://bit.ly/KEPcareer_computervision



매거진의 이전글[후기] 얼굴 인식 알고리즘 선행 연구를 소개합니다