brunch

You can make anything
by writing

C.S.Lewis

by 김 현규 Aug 20. 2018

(Style Transfering) Face2Pic

사진을 Pictogram 이미지로...

2018년 8월 6일 


  주말 동안, 인터넷에서 게시물들을 이리저리 구경하다 보다, 아주 이쁜 그림을 발견했습니다.

_gooooseok님의 그림(인스타 : https://www.instagram.com/_gooooseok/ )

 이런 단순화된 그림에서, 묘사된 옷차림, 머리 길이, 등으로 성별이 구분되구나 생각이 들어서, 실제 사람의 사진을 이렇게 단순화된 picture로 바꾸어보자 생각을 하게되었습니다. 모델이 어느정도 성과를 내면, 이분에게 직접 연락을 드려서 데이터를 얻어 보려 합니다.

 원래는 데이터로 우리가 인지하는 성별간의 차이를 연구하는 목적이었지만, 성별에 관한 분석과는 다소 멀어져서, 새로운 프로젝트로써 글을 작성합니다.

Style transfering

 요즘은 Style Transfering을 해주는 어플리케이션도 많이 출시되었습니다. 그 중 요즘 핫한 어플리케이션 중에 "Meitu" 라는 어플이 인기가 많더라구요. 글을 쓰다가 한번 실험 해 봤습니다. ㅋㅋㅋㅋㅋㅋㅋ

"Meitu"로 변환한 사진 오른쪽 : Before, 왼쪽 : After

 모델을 만들기 위해서 리서치를 해보니, 기존의 Style Transfering은 고해상도 이미지 간의 변환을 다루어 왔다는 것을 발견했습니다. 제가 원하는 결과는 아래와 같이 고해상도 이미지에서 아주 단순한 이미지로의 변환이었기에, 논문을 참고한 것 만으로는 힘들었고, 아직 까지도 이렇다할 결과를 못얻어 내고 있습니다.

(좀 더 기술적인 이야기로 들어가서, GAN이라는 기술이 등장한 이후, 이미지의 도메인간의 변화(ex. 남성의 얼굴을 여성의 얼굴로 변환, 등등)에 관해서 많은 논문이 나왔습니다. 저는 그 중, DiscoGANCycleGAN을 많이 참고 했습니다.)

 아직까지는 이 모델을 완성 시키지는 못했지만, 브런치에 글을 쓰는 기간이 너무 길어지는게 싫어서 지금까지 한 결과 만이라도 한 번 올려 보겠습니다.


유아인 Before -> After

 사진의 섬세함을 버리기가 매우힘드네요... 사실 별차이가 없어 보입니다...

더 학습한 모델로 만들어낸 이미지

 그래도, 좀더 학습하니 아래의 그림처럼, (무섭긴 하지만...) 더 단순화된 이미지를 출력합니다.


 딥러닝 프로젝트에 대한 글을 기술적인 내용없이 쓰니, 결과물 밖에 남지 않습니다. 근데 결과물이 초라하니 글이 초라해보이네요... 앞으로 한 주간 더 발전 시켜 보겠습니다.



작가의 이전글 뉴스로 보는 여자와 남자의 차이
브런치는 최신 브라우저에 최적화 되어있습니다. IE chrome safari