서울시
표정에 따라 말풍선이 바뀌는 서울시 서울놀이 소울미러
지나가는 시민의 표정을 인식해 얼굴 위로 말풍선 문구와 해치 캐릭터를 띄우는, 서울시 '서울놀이'의 체험형 AR 미러 콘텐츠
AR Content
Interactive
Offline Campaign
Brief
서울시는 시민과 관광객이 도시 곳곳에서 서울을 경험하고 즐길 수 있도록 하는 '플레이어블 서울(서울놀이)' 프로젝트를 진행하며, 현장에서 누구나 가볍게 참여할 수 있는 체험형 콘텐츠가 필요했습니다. 별도의 기기나 앱 설치 없이, 화면 앞에 서기만 해도 즐길 수 있는 경험이 중요했습니다.
위에이알은 대형 디스플레이와 웹캠으로 구성된 AR 미러 콘텐츠 '소울미러'를 제작했습니다. 화면 앞에 선 사람들의 얼굴과 표정을 실시간으로 인식해, 표정에 맞는 문구가 담긴 말풍선과 서울시 캐릭터 해치, 낙서 같은 그래픽을 얼굴 주변에 띄워줍니다. 표정이 바뀔 때마다 문구도 함께 바뀌어, 거울 앞에서 오늘 하루의 'SOUL'을 확인하는 재미를 더했습니다.
Challenge
지나가던 시민이 화면 앞에서 자연스럽게 멈춰 서게 만들 수 있을까?
공공장소의 체험형 콘텐츠는 사용법을 따로 익혀야 하거나 참여 과정이 번거로우면 쉽게 지나쳐집니다.
이번 프로젝트의 과제는 화면 앞에 서기만 하면 여러 사람이 동시에 참여할 수 있고, 자신의 표정에 따라 바로 반응이 돌아오는 직관적인 경험으로 서울놀이를 알리는 것이었습니다.
No App, Just Stand
앱 설치나 조작 없이 화면 앞에 서기만 하면 시작되는 체험
Expression Reaction
표정에 따라 즉각적으로 달라지는 문구로 유저의 반응을 유도
Seoul Identity
해치 캐릭터와 서울놀이·SEOUL PLAY 로고로 서울시 브랜드를 자연스럽게 노출
Solution
위에이알은 Unity와 OpenCV 기반의 얼굴·표정 인식 기술로 소울미러를 개발했습니다. 기쁨, 놀람, 화남 등 유저의 표정을 인식해 표정별로 색과 문구가 다른 말풍선을 머리 위에 띄우고, 해치 캐릭터 애니메이션과 낙서 그래픽이 얼굴 주변을 떠다니게 했습니다. 여러 사람이 동시에 화면에 들어와도 각자의 얼굴을 따라가도록 트래킹을 안정화했고, 카메라와의 거리에 따라 그래픽 크기를 조절해 자연스럽게 보이도록 했습니다. 얼굴이 인식되지 않을 때는 인트로 영상이 재생되어 지나가는 사람들의 시선을 끌고, 화면 좌상단과 우하단에는 서울놀이와 SEOUL PLAY 로고를 고정했습니다.
Real-time Expression Tracking
표정 인식으로 다섯 가지 색의 말풍선과 문구를 실시간으로 전환
Multi-face Mirror
여러 사람의 얼굴을 동시에 인식하고 각자에게 맞는 그래픽을 표시
Attract Loop
사람이 없을 때는 인트로 영상을 재생해 지나가는 시민의 참여를 유도
Impact
서울놀이 소울미러는 서울시의 플레이어블 서울 프로젝트를 위해 제작한 체험형 AR 미러 콘텐츠입니다. 화면 앞에 선 시민의 표정을 실시간으로 인식해 말풍선 문구와 해치 캐릭터로 반응하게 해, 누구나 가볍게 멈춰 서서 서울을 즐기는 경험을 만들었습니다.
