PixelUp에서 이미지를 올리면 사진 모드와 일러스트 모드 중 하나를 고르게 됩니다. 이름만 보면 사진은 사진 모드, 그림은 일러스트 모드를 고르면 될 것 같지만, 실제로는 3D 렌더링, 웹툰 캡처, 손그림 스캔처럼 어느 쪽인지 애매한 이미지가 많습니다. 두 모드가 어떻게 다른지 이해하면 이런 경우에도 근거를 갖고 고를 수 있습니다.
두 모드는 서로 다른 모델입니다
두 모드는 같은 모델에 설정값만 바꾼 것이 아니라, 학습 데이터가 다른 별개의 모델입니다.
- 사진 모드는
realesrgan-x4plus모델을 사용합니다. 풍경, 인물, 사물 등 실제 사진으로 학습했기 때문에 피부결, 머리카락, 나뭇잎, 돌과 천의 질감처럼 불규칙하고 미세한 무늬를 살리는 데 강합니다. - 일러스트 모드는
realesrgan-x4plus-anime모델을 사용합니다. 애니메이션과 일러스트 이미지로 학습했기 때문에 넓고 균일한 색면, 일정한 굵기의 외곽선, 단순한 그라데이션을 깔끔하게 유지하는 데 강합니다.
각 모델은 자기가 학습한 이미지의 특징을 “정답”으로 여깁니다. 그래서 모드를 반대로 고르면 결과가 한쪽으로 치우칩니다. 사진을 일러스트 모드로 처리하면 피부와 배경의 미세한 질감이 평평한 색면으로 정리되어 유화나 포스터처럼 보입니다. 반대로 일러스트를 사진 모드로 처리하면 매끈해야 할 색면에 자글자글한 질감이 생기거나, 외곽선 주변이 지저분해지기도 합니다.
판단 기준은 “질감이 있는가”입니다
애매한 이미지를 만났을 때는 사진인지 그림인지를 따지기보다, 이미지를 확대해서 표면을 들여다보는 편이 정확합니다. 표면에 불규칙한 질감과 자연스러운 빛의 변화가 있다면 사진 모드가, 색이 면 단위로 나뉘고 선이 형태를 규정한다면 일러스트 모드가 어울립니다.
헷갈리는 이미지 유형별 추천
| 이미지 유형 | 추천 모드 | 이유 |
|---|---|---|
| 스마트폰 사진, 인물 사진 | 사진 | 피부와 머리카락의 미세한 질감을 유지해야 함 |
| 애니메이션 캡처, 셀 채색 일러스트 | 일러스트 | 균일한 색면과 선이 핵심 |
| 웹툰 컷 | 일러스트 | 단, 사진 배경을 합성한 컷은 두 모드를 비교해 볼 것 |
| 사실적인 3D 렌더링 | 사진 | 재질 표현이 실제 사진에 가까움 |
| 단순한 3D 캐릭터, 아이콘 스타일 그래픽 | 일러스트 | 면이 넓고 질감이 거의 없음 |
| 수채화, 연필화 스캔 | 사진 | 종이 질감과 붓 자국은 불규칙한 무늬라서 일러스트 모드가 지워 버리기 쉬움 |
| 로고, 단색 아이콘 | 일러스트 | 가능하면 원본 벡터 파일을 구하는 편이 더 좋음 |
수채화나 연필화가 사진 모드로 분류된 점이 의외일 수 있습니다. 그림이라도 종이의 결, 물감이 번진 자국, 연필 흑연의 거친 입자는 모두 사진에 가까운 불규칙한 질감입니다. 일러스트 모드는 이런 흔적을 노이즈로 판단해서 매끈하게 지우는 경향이 있어서, 손그림 특유의 느낌이 사라질 수 있습니다.
애매할 때는 작은 조각으로 비교하세요
두 모드 중 무엇이 나을지 확신이 서지 않는다면 둘 다 돌려 보는 것이 가장 확실합니다. 다만 큰 이미지는 처리에 시간이 걸리므로, 전체 이미지 대신 판단에 중요한 부분만 잘라서 시험하는 방법을 권합니다.
- 얼굴, 외곽선, 질감이 많은 배경처럼 결과 차이가 크게 날 부분을 500픽셀 안팎으로 잘라 냅니다.
- 같은 조각을 사진 모드와 일러스트 모드로 한 번씩 처리합니다.
- 비교 슬라이더로 원본과 대조하면서 질감이 사라졌는지, 반대로 없던 무늬가 생겼는지 확인합니다.
- 더 자연스러운 쪽을 골라 원본 전체를 처리합니다.
얼굴 보정 옵션에 대해
서비스가 클라우드 엔진으로 동작할 때는 사진 모드에 얼굴 보정 옵션이 함께 표시됩니다. 이 옵션은 얼굴 영역을 별도의 얼굴 복원 모델로 한 번 더 다듬어서, 작게 찍힌 얼굴의 눈과 입 모양을 또렷하게 만듭니다. 다만 얼굴을 새로 그리는 과정이 들어가므로 원래 인물과 인상이 달라질 수 있고, 일러스트에는 적용되지 않습니다. 로컬 엔진으로 동작할 때는 이 옵션이 나타나지 않습니다. 화면 상단의 엔진 표시를 보면 현재 어떤 엔진이 쓰이는지 확인할 수 있습니다.
모드를 바꿔도 결과가 어색하다면 원본 자체의 압축 상태가 원인일 수 있습니다. 이 경우에는 JPEG 압축 노이즈와 업스케일 결과의 관계를 함께 읽어 보세요.