마음이 참 짠했던 사진입니다. 저화질로만 남아 있는 유관순 열사의 사진을 고화질로 복원하고 미소를 덧붙인 것인데, 딥러닝 기반의 얼굴 편집 기술이 들어간 Faceapp을 사용했다고 합니다. Faceapp에 정확히 어떤 기술이 들어갔는지는 알 수 없지만, 아마 super resolution 기술과 GAN 기반 표정 생성 기술이 적용된 것으로 보입니다. 다음은 super resolution과 GAN 기반 표정 생성 기술에 대한 참고글입니다.
Pixar의 Super Resolution 기술과 그 응용사례 | Smilegate.AI
Pixar에서는 animation rendering pipeline 과정에서 비용을 낮추기 위해 이 기술을 사용했습니다. 링크 글에 따르면 2K 기준 1 프레임을 rendering하는데 50 CPU hour가 필요하다고 합니다. 90분 영화 기준 1초에 24 프레임으로 가정하면
GANimation – 이미지 한 장으로 표정을 만들어내는 연구 | Smilegate.AI
이미지 한장을 입력으로 얼굴 표정을 바꾸는 애니메이션을 만들어주는 기술인 GANimation의 코드 저장소입니다. 기본적으로는 conditional GAN인데, 얼굴의 해부학적 움직임을 기술하기 위한 방법론인 FACS (facial action coding system)를
대략 어떤 기술들이 들어갔는지 추측은 되지만, 역시 중요한 건 기술 그 자체보다는 웃는 얼굴을 드리고자하는 마음 씀씀이인 것 같습니다. 이렇게 생성한 결과물이 실제 인물과 같은지에 대한 논쟁보다는, 나라를 위해 희생했던 분께 기술로나마 미소를 주고 싶다는 고운 마음을 더 생각해 봅니다. 아래는 클리앙에 올라왔던 원 글 링크입니다.
유관순 열사 사진을 조금더 복원해 봅니다 : 클리앙
유관순 열사 사진을 볼때마다 고문으로 부은 얼굴이 안쓰러웠습니다. 17세면 제 아이보다 겨우 4살 연상인데 이렇게 고생한 얼굴 밖에 없다니.. 페이스 앱으로 약간 수정해서 생전 모습을 그려 봅니다. 10만원권이 나온다면 반드시 이렇게 웃는 유관순 열사 사진이었으면 합니다. 부디 열사의 평안을 빕니다.
