<WebtoonMe>

WebtoonMe는 네이버 웹툰 AI에서 프로모션한 사진/영상을 웹툰화 하는 프로젝트로 이를 간단히 소개하려 합니다.

웹툰미는 내 얼굴이 웹툰 캐릭터로 어떻게 변환될 수 있을까? 라는 궁금증에서 시작된 딥러닝 기반 '얼굴변환' 기술 프로젝트라고 합니다

그러나 많이 알려진 얼굴 변환 기술과는 달리 문제가 발생

-> 사진에 존재하는 다양한 사물(얼굴, 신체 부위, 배경 등)이 각각 필요로 하는 '스타일' 특성이 모두 달랐기 때문에 이를 유기적으로 고려하지 못한 변환이 어색한 결과를 보인 것입니다.

일반적으로 딥러닝 연구에 쓰이는 데이터셋과 달리 웹툰 데이터셋에는 사물마다 고유의 스타일이라는 속성이 있다는 결론 도출하였다고 합니다.
즉, 우리는 웹툰을 보면서 저게 어떤 사물인지 바로 파악이 가능하지만 현실의 이미지와 달리 A작품의 필통과 B작품의 필통은 아예 다르게 인식될 수 있다라는 내용으로 파악됩니다(작가 마다 그림 스타일이 달라서)

실제로 다수의 웹툰 작가님들을 인터뷰해 웹툰이 어떻게 만들어지는지, 각종 스타일 부여를 위해 어떤 고려사항이 있는지 등을 파악하였다고 합니다.

그 후 얼굴, 신체, 인공물, 자연물 등 다양한 객체로 이루어진 웹툰 데이터셋을 구축 후 딥러닝 모델을 통해 스타일 유사도를 개선해 나갔다고합니다.

그리고 작가님들의 리터칭 기법을 모사할 수 있는 여러 후처리 알고리즘을 적용하여 보다 자연스러운 결과가 나오도록 성능 개선을 수행하여 재미있는 결과들을 만들어냈습니다.

프로세스는 아래와 같습니다

아래는 다양한 변환 결과들입니다.

이러한 프로젝트들은 유저(독자)들에게는 즐거움을 주고 창작자에겐 작품 홍보와 같은 효과를 누릴 수 있게합니다.

앞으로도 더 재밌는 프로젝트들이 나오길 기대하며 !

내가 그린 그림 또는 기존에 있는 그림의 채색을 쉽게 도와주는 서비스입니다.

WEBTOON AI에서 낸 다른 프로젝트인 [웹툰 AI PAINTER], [AI PAINTER 관련기사]

WebtoonMe(내 사진이 웹툰화된다면?)