>
간추린 한마디: AI로 생성한 이미지로 VTuber 활동을 할 수 있도록 하는 프로젝트를 같이 진행해 보실 분을 구합니다!!
안녕하세요. VTuber와 Anime의 미래를 믿고 VTuber를 위한 어플리케이션을 만들고 있는 팀 심바 입니다.
저희는 스마트폰의 카메라 만을 이용해서 사용자의 모션을 인식해 3D 아바타를 움직일 수 있는 앱을 개발해 현재 서비스하고 있어요. (앱이름은 연락주시면 알려드릴게요!)
저희 앱을 통해 “누구나” 쉽게 아바타로 자신을 표현할 수 있습니다. 앱을 키면 바로 아바타가 자신을 따라 움직이는 경험을 제공하기 때문에 실제로 많은 10대들이 쉽게 자신의 아바타로 영상을 찍어서 소셜 미디어에 공유하고 있어요.
하지만 한가지 쉽지 않은 것이 있습니다. 바로 아바타 인데요. 지금은 미리 만들어져있는 3D 아바타(VRoidHub)들을 사용하기 때문에 유저들이 자신의 취향에 맞는 아바타를 사용하기가 매우 힘듭니다. 저희는 유저들과 활발히 소통하고 있는데, 실제로 아바타를 만들고 싶다는 유저들이 압도적으로 많았어요.
지금까지 이 프로젝트를 해오면서 AI를 이용해서 아바타를 “쉽게 움직일 수 있도록” 만드는데 집중했고 PC뿐만 아니라 스마트폰에서 동작하는 프로덕트를 만들었습니다.
이제는 “쉽게 아바타를 만드는” 것에 초점을 맞춰 누구나 쉽게 아바타로 자신을 표현할 수 있도록 하는 저희의 미션을 완성시키려고 합니다.
프로젝트 개요
- AI로 아바타를 생성합니다. 아바타를 제외한 뒷 배경은 단색으로 처리해서 배경을 쉽게 제거할 수 있도록 추출합니다. 아바타로 사용하기 좋은 결과물을 생성하는 프롬프트를 찾아야해요.
- 추출된 이미지에서 배경을 제거합니다.
3. 눈과 입부분을 추출해서 눈을 뜨고 감은 것, 입을 벌리고 닫은 것의 중간 모습(Blendshape)들을 생성모델로 생성합니다. 아래는 하나의 이미지로 여러가지 표정을 만들어낸 예시입니다. (저희 프로젝트는 아닙니다!)
4. 저희가 원래 3D 모델에 사용하던 모션 트래킹 기술을 사용하여 2D이미지를 사용자에 모션에 맞게 움직입니다.
함께 재밌는 앱을 만들어갈 사람을 찾습니다.
AI로 만들어낸 작품에 생명을 불어넣는 일, 재밌을 것 같지 않나요? 비전에 함께 하시는 분, 팀이 궁금하신 분, 저희와 함께 프로젝트를 해보고 싶으신 분은 언제든 편하게 연락주세요!
>팀 심바 https://open.kakao.com/me/Symba