포코피아st 렌더러 만들기 · 3편

블록을 먹음직스러운 과자처럼 보이게 하기

·21분·English
목차출발점이 된 한 문장소재를 알아보게 하는 무늬과자처럼 보이게 하는 세 가지빛이 스며드는 느낌설탕 코팅 같은 광택가장자리의 빛직접 켜고 꺼 보기미니어처의 마지막 한 겹한 프레임 해부참고 자료

이 시리즈의 앞선 두 글을 열었던 그 섬에서 다시 시작하겠습니다. 블록으로 쌓은 작은 공중 섬이고 끌거나 방향키로 돌려 볼 수 있습니다.

말랑한 블록 섬Interactive
끌어서 돌려 보기 · 방향키

블록으로 쌓은 작은 공중 섬 디오라마를 WebGL2로 그립니다. 오두막, 연못, 나무 세 그루, 꽃, 머리가 큰 주민 한 명이 있습니다. 모서리를 둥글게 비추고, 그림자를 푸른 보랏빛으로 물들이고, 블록마다 과자 같은 무늬와 부드러운 광택을 입히고, 위아래를 흐리게 해 탁자 위 미니어처처럼 보이게 했습니다. 끌거나 방향키로 섬을 돌려 볼 수 있습니다.

이번에 볼 곳은 블록의 겉면입니다. 잔디 블록 옆면에는 초록 설탕옷이 흘러내린 것 같은 자국이 있고 지붕에는 짜서 올린 크림 같은 비늘 무늬가 있습니다. 나뭇잎 덩어리는 젤리처럼 해를 등지면 빛이 비쳐 보이고 물은 탄산수처럼 반짝입니다. 그런데 흙은 여전히 흙으로, 돌은 돌로 읽힙니다. 이 글은 이 블록들을 어떻게 과자처럼 보이게 만들었는지 이야기합니다.

출발점이 된 한 문장

앞의 두 글 각진 블록이 말랑해 보이는 이유와 게임 속 그림자가 까맣지 않은 이유처럼 이 시리즈는 게임 ぽこ あ ポケモン(Pokémon Pokopia)의 화면에서 받은 인상을 출발점으로 삼습니다. 이 게임의 렌더링 방식을 설명한 공식 기술 강연이나 글은 제가 찾은 범위에서는 없습니다. 그래서 공개된 아트 디렉션 발언만 인용하고 구현은 제가 그 발언을 읽고 직접 짠 WebGL2 렌더러와 직접 만든 블록 디오라마로 보여 드립니다. 게임 안에서 실제로 무엇을 하는지는 알 수 없고 이 글도 그것을 주장하지 않습니다.

이번 글의 출발점은 패미통 개발자 인터뷰에서 코에이테크모의 아트 디렉터 綾野万里奈(아야노 마리나)가 한 말입니다.

また、造形や表現を大きくデフォルメしているからこそ、地形やオブジェクトの質感に関しては、現実とリンクする素材感を軸にしつつどこかお菓子のようなおいしそうな質感や色や模様を意識して、誰もが馴染みを持てる納得できるルックを目指しました。

우리말로 옮기면 이렇습니다. 조형과 표현을 크게 데포르메했기 때문에, 지형과 오브젝트의 질감은 현실과 이어지는 소재감을 축으로 삼으면서도 어딘가 과자 같은 맛있어 보이는 질감과 색과 무늬를 의식해, 누구나 친숙하게 받아들일 수 있는 룩을 목표로 했습니다.

이 문장에는 묘한 긴장이 있습니다. 모양은 현실에서 멀리 떨어뜨렸는데 재질은 현실에 붙들어 두겠다고 했으니까요. 제가 보기에 이것은 두 가지 요구로 나눠 읽을 수 있습니다.

  • 소재를 알아보게 하는 단서. 블록이 아무리 둥글고 커도 흙은 흙으로, 나무는 나무로 한눈에 읽혀야 합니다. 이 일은 주로 무늬가 맡습니다.
  • 먹음직스러운 마감. 그 위에 과자의 겉면을 입힙니다. 설탕 코팅 같은 광택, 젤리처럼 빛이 살짝 스며드는 느낌, 따뜻하고 채도 있는 색입니다. 이 일은 주로 조명 계산이 맡습니다.

소재를 알아보게 하는 무늬

블록 게임의 재질이라고 하면 보통 블록 면마다 작은 픽셀 아트 텍스처를 붙이는 방식을 떠올립니다. 이 렌더러는 텍스처 이미지를 하나도 쓰지 않습니다. 무늬는 모두 프래그먼트 셰이더 안에서 좌표로부터 계산합니다. 이런 방식을 절차적 텍스처라고 합니다.

굳이 이렇게 한 이유는 두 가지입니다. 첫째, 무늬를 숫자 몇 개로 조절할 수 있어서 과자 쪽으로 얼마나 기울일지를 실험하기 쉽습니다. 둘째, 해상도에 묶이지 않아서 카메라를 가까이 대도 픽셀이 깨지지 않습니다. 블록이 화면에 크게 잡히는 디오라마에서는 이 점이 꽤 중요합니다.

거의 모든 무늬는 두 종류의 노이즈를 섞어서 만듭니다.

하나는 값 노이즈(value noise)입니다. 정수 격자의 꼭짓점마다 무작위 값을 하나씩 두고 그 사이를 부드럽게 보간합니다. 보간 계수는 선형이 아니라 3차 곡선을 씁니다. 그래야 격자선에서 꺾인 자국이 보이지 않습니다.

u=3f2−2f3,n(p)=mix⁡(mix⁡(a,b,ux),  mix⁡(c,d,ux),  uy)u = 3f^2 - 2f^3, \qquad n(\mathbf{p}) = \operatorname{mix}\big(\operatorname{mix}(a, b, u_x),\; \operatorname{mix}(c, d, u_x),\; u_y\big)

여기서 f는 격자 칸 안에서의 위치(0–1), a부터 d는 네 꼭짓점의 무작위 값입니다. 크기를 두 배씩 줄인 노이즈를 몇 겹 더하면(fBm이라고 부릅니다) 흙의 얼룩이나 잔디의 색 번짐 같은 불규칙한 변화가 됩니다.

다른 하나는 셀 노이즈입니다. 공간에 무작위 점(특징점)을 흩어 두고 각 위치에서 가장 가까운 점까지의 거리를 값으로 씁니다.

F1(x)=min⁡i∥x−pi∥,F2(x)=두 번째로 가까운 거리F_1(\mathbf{x}) = \min_i \lVert \mathbf{x} - \mathbf{p}_i \rVert, \qquad F_2(\mathbf{x}) = \text{두 번째로 가까운 거리}

F1만 쓰면 점을 중심으로 동그랗게 퍼지는 무늬가 됩니다. F2에서 F1을 빼면 두 점의 경계에서 0이 되니 세포 벽이나 돌 사이의 줄눈 같은 선이 생깁니다. 가장 가까운 점의 번호도 같이 돌려주면 칸마다 색을 조금씩 다르게 할 수 있습니다. 조약돌 하나하나가 미묘하게 다른 색인 것은 이 번호 덕분입니다.

아래 그림은 이 재료들이 흙 무늬가 되기까지를 차례로 보여 줍니다. 셰이더의 함수를 그대로 옮겨 같은 영역을 계산했습니다.

다섯 칸을 화살표로 이은 그림입니다. 첫 칸은 격자마다 무작위 회색 하나를 칠한 모자이크, 둘째 칸은 같은 값을 3차 곡선으로 부드럽게 이은 흐릿한 얼룩(값 노이즈), 셋째 칸은 크기가 다른 노이즈를 세 겹 더해 더 잘게 일렁이는 얼룩(fBm)입니다. 넷째 칸은 흰 바탕에 검은 점이 흩어진 셀 노이즈 F1로, 점마다 가장 가까운 특징점까지의 거리입니다. 마지막 칸은 fBm 얼룩 위에 셀 노이즈로 고른 동그란 갈색 알갱이를 박은 흙 무늬입니다.

설명을 위해 단순화한 셀 노이즈 함수는 이렇습니다. 실제 셰이더에서는 특징점이 칸 가장자리에 붙지 않도록 범위를 조금 좁힙니다.

// x: 가장 가까운 점까지 거리, y: 두 번째로 가까운 거리, z: 가장 가까운 칸의 번호
vec3 cellular(vec2 p) {
  vec2 i = floor(p), f = fract(p);
  float d1 = 8.0, d2 = 8.0, id = 0.0;
  for (int y = -1; y <= 1; y++)
    for (int x = -1; x <= 1; x++) {
      vec2 g = vec2(x, y);
      vec2 o = hash22(i + g);          // 이웃 칸의 특징점 위치(0–1)
      float d = length(g + o - f);
      if (d < d1) { d2 = d1; d1 = d; id = hash12(i + g); }
      else if (d < d2) d2 = d;
    }
  return vec3(d1, d2, id);
}

절차적 무늬를 입히려면 표면 위의 2차원 좌표가 있어야 합니다. 곡면 캐릭터라면 UV를 펴는 일부터 큰일이지만 블록 세계에서는 이 문제가 거의 사라집니다. 모든 면이 x, y, z 축 중 하나를 향하고 있기 때문입니다.

그래서 이 렌더러는 면의 방향에 따라 월드 좌표에서 두 성분만 골라 무늬 좌표로 씁니다. 윗면이면 (x, z), x축을 보는 옆면이면 (z, y), z축을 보는 옆면이면 (x, y)입니다. 설명을 위해 단순화하면 이렇습니다.

vec3 aG = abs(geomNormal);
bool top = aG.y > max(aG.x, aG.z);
vec2 q = top ? worldPos.xz
       : (aG.x > aG.z ? worldPos.zy : worldPos.xy);
vec3 albedo = patternFor(material, q);

이 방식에는 덤이 하나 있습니다. 이웃한 블록끼리 좌표가 그대로 이어지기 때문에 흙 블록 열 개를 나란히 놓아도 무늬가 블록마다 똑같이 반복되지 않고 하나의 넓은 땅처럼 이어집니다. 블록마다 같은 텍스처를 붙이면 생기는 바둑판 같은 반복과 이음매가 처음부터 생기지 않습니다. 반대로 나이테나 나무판처럼 블록 하나가 단위인 무늬는 블록 안에서의 위치(월드 좌표의 소수 부분)를 따로 써서 일부러 블록마다 끊어 줍니다.

메시가 면마다 넣어 두는 UV(0–1)는 첫 글에서 다룬 모서리 둥글리기에 씁니다. 블록 면이 정사각형이라 이 UV는 늘 반듯합니다. 무늬와 둥글리기가 서로 다른 좌표를 쓰니 둘이 간섭하지 않습니다.

값 노이즈와 셀 노이즈, 이 두 재료로 재질마다 무늬를 따로 짰습니다. 원칙은 하나였습니다. 실제 소재에서 그 소재를 알아보게 하는 특징 하나를 고르고 그것을 과자처럼 크고 둥글고 깨끗하게 바꿉니다.

  • 흙: fBm으로 얼룩을 깔고 셀 노이즈로 작은 알갱이를 박습니다. 일부 칸만 골라 살짝 어둡게 해서 부스러기가 박힌 쿠키 반죽처럼 보이게 했습니다.
  • 잔디 윗면: 큰 fBm 두 겹으로 노란빛과 푸른빛 얼룩을 번지게 하고 셀 노이즈로 밝은 점을 드문드문 찍었습니다. 풀잎을 한 가닥씩 그리지 않아도 점과 얼룩만으로 잔디로 읽힙니다.
  • 잔디 옆면: 흙 위에 초록이 흘러내린 경계를 사인파와 노이즈로 만들었습니다. 위쪽 초록이 아래로 녹아내린 아이싱처럼 보이는 부분입니다. 경계 바로 아래만 조금 어둡게 해 두께를 줍니다.
  • 통나무: 윗면은 중심에서의 거리에 사인을 걸어 나이테를 그리고 노이즈로 동심원을 살짝 흔듭니다. 옆면은 세로로 길게 늘인 값 노이즈로 결을 냅니다.
  • 판자: 한 블록을 판 세 장으로 나누고 판마다 밝기를 조금씩 바꾼 뒤 이음매를 눌러 넣은 듯 어둡게 합니다.
  • 돌과 길(조약돌): 셀 노이즈의 칸 하나가 돌 하나입니다. 경계(F2 − F1이 작은 곳)는 줄눈이 됩니다. 칸 번호로 돌마다 색을 바꾸고 칸 가운데로 갈수록 살짝 밝혀 돌이 볼록해 보이게 합니다.
  • 모래: 아주 잘게 쪼갠 값 노이즈와 작은 칸마다 조금씩 다른 밝기만 더해 고운 입자감만 남겼습니다.
  • 지붕: 반원 비늘을 엇갈려 쌓았습니다. 짤주머니로 짜 올린 크림을 생각하며 만든 무늬입니다.
  • 물: 셀 노이즈의 경계선을 시간에 따라 천천히 흘려 탄산수 같은 밝은 선을 띄우고 윗면의 노멀을 사인파로 살짝 출렁이게 합니다.
  • 나뭇잎: 셀 노이즈처럼 무작위 점을 흩어 두되 가장 가까운 점 하나를 딱 잘라 고르지 않고 이웃 점들까지의 거리를 가까울수록 큰 가중치로 섞습니다. 그러면 칸 사이에 날카로운 경계선이 생기지 않고 둥근 봉우리가 매끈하게 이어진 면이 됩니다. 봉우리 하나하나는 작은 돔으로 보고 그 기울기만큼 노멀을 살짝 휘게 합니다. 그래서 봉우리마다 해를 향한 쪽은 밝고 반대쪽은 어둡습니다. 색도 봉우리 꼭대기는 따뜻하게, 골은 푸르스름하게 칠합니다. 잎을 한 장씩 그리지 않고 젤리 과자를 뭉쳐 놓은 덩어리처럼 보이게 하기 위해서입니다.

잎의 봉우리는 색보다 노멀에서 더 잘 보입니다. 같은 나무를 최종 화면과 노멀 디버그 출력으로 나란히 놓으면 블록 한 면 안에서도 노멀이 봉우리마다 둥글게 휘어 있는 것을 볼 수 있습니다.

첫머리 섬의 큰 나무를 가까이서 본 두 장입니다. 왼쪽 최종 화면에서는 잎 블록 면마다 노르스름하고 밝은 봉우리와 푸르스름한 골이 몽글몽글하게 이어집니다. 오른쪽 노멀 출력에서는 같은 자리가 초록, 파랑, 분홍이 둥글게 번진 얼룩으로 보여, 평평한 블록 면 안에서도 방향이 봉우리마다 바뀐다는 것을 보여 줍니다. 모서리는 넓게 둥글려져 색이 부드럽게 넘어갑니다.

큰 나무의 잎 덩어리, 최종(왼쪽)과 노멀(오른쪽). 렌더: 직접.

아래는 뒤에 나오는 실험실의 재료 견본 장면에서 블록을 하나씩 가까이 잘라 낸 모습입니다. 모든 마감을 켠 상태입니다.

블록 열 개를 하나씩 확대한 두 줄짜리 격자입니다. 윗줄은 왼쪽부터 초록 아이싱이 옆면으로 흘러내리고 아래에 동그란 갈색 점이 박힌 잔디, 쿠키처럼 동그란 짙은 점이 박힌 흙, 연보라 돌이 짙은 줄눈으로 나뉜 돌, 매끈하고 고운 노란 모래, 크림색 조약돌이 줄눈으로 나뉜 길입니다. 아랫줄은 윗면에 주황 나이테 원반이 있고 옆면에 세로 결이 있는 통나무, 판 세 장이 가로로 나뉜 판자, 옆면에 반원 비늘이 겹친 붉은 지붕, 속에서 밝은 초록이 비치는 듯한 잎, 하늘색 윗면과 짙은 파랑 옆면의 물입니다. 판자와 지붕 윗면 가운데에는 조금 더 밝은 네모가 떠 있습니다.

재료 견본 블록 열 가지, 모든 마감 켬, 오후의 해. 렌더: 직접.

결과를 보면 무늬는 현실보다 훨씬 단순합니다. 흙에는 돌멩이도 뿌리도 없고 나무에는 옹이도 없습니다. 그래도 소재가 읽히는 것은 그 소재의 대표 특징 하나가 분명하게 남아 있기 때문이라고 저는 봅니다. 데포르메된 모양과도 잘 어울립니다. 모양을 단순하게 줄인 만큼 무늬도 같은 비율로 줄였습니다. 무늬만 끄고 나머지는 그대로 두면 흙과 모래와 길은 색으로만 구분되는 단색 덩어리가 됩니다.

같은 쟁반을 나란히 놓은 두 장입니다. 왼쪽은 무늬를 끈 것으로 블록 열 개가 모두 단색이라, 흙과 통나무, 모래와 길이 색이 비슷한 덩어리로만 보입니다. 오른쪽은 무늬를 켠 것으로 잔디의 아이싱, 흙의 알갱이, 돌의 줄눈, 판자의 이음매, 통나무의 나이테가 드러납니다.

무늬 끔(왼쪽)과 켬(오른쪽). 다른 마감은 모두 켬. 렌더: 직접.

과자처럼 보이게 하는 세 가지

무늬로 소재가 읽히게 됐으니 이제 겉면을 과자로 만들 차례입니다. 과자를 떠올려 보면 몇 가지 특징이 있습니다. 젤리나 사탕은 빛이 표면에서 바로 튕겨 나가지 않고 조금 들어갔다가 나옵니다. 설탕 코팅을 입힌 쿠키는 반짝이지만 플라스틱처럼 쨍하지 않고 부드럽게 번집니다. 그리고 둥근 과자의 가장자리는 배경 빛을 받아 은은하게 밝습니다. 이 렌더러는 이것을 각각 반투명 근사, 넓은 광택, 테두리 빛으로 옮겼습니다.

빛이 스며드는 느낌

피부, 대리석, 젤리처럼 반투명한 물체는 빛이 표면 아래로 들어가 몇 번 흩어진 뒤 들어온 곳 근처에서 다시 나옵니다. 이것을 서브서피스 스캐터링(subsurface scattering)이라고 합니다. 제대로 계산하려면 비싸지만 눈에 띄는 효과만 흉내 내는 값싼 방법이 오래전부터 쓰였습니다.

GPU Gems 1권 16장 Real-Time Approximations to Subsurface Scattering이 소개하는 첫 방법이 랩 라이팅(wrap lighting)입니다. 빛이 닿는 범위를 그늘 쪽으로 조금 감아 돌려서 원래라면 까맣게 끊길 명암 경계(터미네이터) 너머까지 빛이 번지게 합니다.

dwrap=max⁡ ⁣(0,  n⋅l+w1+w)d_{\text{wrap}} = \max\!\left(0,\; \frac{\mathbf{n} \cdot \mathbf{l} + w}{1 + w}\right)

w가 0이면 보통의 램버트 확산광이고 클수록 빛이 뒤쪽까지 감깁니다. 이 시리즈의 앞 글에서 그늘을 부드럽게 다룰 때 나온 것과 같은 계열의 식입니다. 같은 장에는 한 걸음 더 나간 요령도 있습니다. 명암 경계 근처의 좁은 띠에만 붉은 기운(scatterColor)을 더해 피부의 그늘 경계가 살짝 붉게 물드는 모습을 흉내 냅니다.

이 렌더러도 같은 생각을 따릅니다. 감아 돌린 확산광(w = 0.55)과 원래 확산광의 차이, 즉 명암 경계 너머의 띠에만 색을 더합니다. 그 색은 재질 색을 한 번 더 곱해 채도를 높인 색입니다. 잔디 그늘 경계는 더 진한 초록, 꽃잎 경계는 더 진한 분홍이 됩니다. 젤리를 빛에 비춰 보면 그늘로 넘어가는 자리가 회색이 아니라 더 진한 제 색인 것과 비슷한 효과입니다.

두 부분으로 된 그림입니다. 위쪽은 표면 단면 두 개를 나란히 보여 줍니다. 왼쪽 불투명한 표면에서는 빛이 들어온 자리에서 바로 되튀고, 오른쪽 반투명한 사탕에서는 분홍색 경로가 표면 아래에서 여러 번 꺾이며 흩어진 뒤 조금 떨어진 곳에서 나옵니다. 아래쪽은 오른쪽에서 빛을 받는 같은 공 두 개입니다. 왼쪽 공은 명암 경계에서 칼같이 끊기고 그늘이 검정이며, 오른쪽 공은 경계가 그늘 쪽으로 번지고 그 근처가 분홍빛으로 물듭니다.

또 하나 나뭇잎이나 꽃잎처럼 얇은 것은 해를 등지고 서면 빛이 뒤에서 비쳐 보입니다. 시선 방향과 빛 방향이 거의 마주 볼 때만 켜지는 항을 더했습니다. 마지막으로 해를 향한 쪽의 가장자리에도 빛이 조금 더 맺히게 했습니다. 얇고 무른 것은 비스듬히 스친 빛이 가장자리로 스며들었다가 흩어져 나오기 때문에 해 쪽 윤곽이 은은하게 빛나 보입니다. 이 항은 표면을 스치듯 볼수록(1 − n·v가 클수록), 그리고 그 면이 해를 향할수록 커집니다. 그림자 속에서는 꺼집니다. 설명을 위해 단순화한 코드입니다.

float NdL = dot(N, L);
float lambert = max(NdL, 0.0);
// 명암 경계 너머의 띠: 감아 돌린 확산광 - 원래 확산광 (그림자 속에서는 약하게)
float band = max((NdL + 0.55) / 1.55 - lambert, 0.0) * mix(0.35, 1.0, shadow);
// 해를 등진 얇은 것: 시선이 빛을 마주 볼수록 밝게
float through = pow(clamp(dot(V, -L), 0.0, 1.0), 3.0) * (0.35 + 0.65 * shadow);
// 해를 향한 가장자리의 빛: 스치듯 볼수록, 해를 향할수록
float glow = pow(1.0 - max(dot(N, V), 0.0), 2.0) * smoothstep(-0.1, 0.7, NdL) * shadow;
vec3 sssColor = albedo * normalize(albedo + 0.05) * 1.6;   // 더 진한 제 색
color += sssColor * sunColor * sss
       * (band * 0.55 + through * 0.35 + glow * 0.5 * sss) * ao;

sss는 재질마다 다른 값입니다. 나뭇잎과 꽃잎과 피부는 0.9로 높고, 잔디는 0.55, 흙과 돌과 통나무는 0.08–0.15로 낮습니다. 가장자리 빛에는 sss를 한 번 더 곱하므로 값이 낮은 재질에서는 이 항이 거의 사라집니다. 흙까지 젤리처럼 비쳐 보이면 소재감이 무너지기 때문입니다. 첫 번째 요구(소재가 읽혀야 한다)가 두 번째 요구(과자처럼 보여야 한다)에 한계를 그어 주는 자리입니다.

재료 견본에서 이 항만 끄고 켜 보면 차이가 가장 큰 곳은 잎 블록입니다.

지붕 블록과 잎 블록을 같은 각도에서 찍은 두 장입니다. 왼쪽 투과를 끈 쪽의 잎 블록은 칙칙한 청록 덩어리이고 옆면이 어둡게 가라앉아 있습니다. 오른쪽 투과를 켠 쪽의 잎 블록은 윗면과 옆면 위쪽이 밝은 연두로 빛나고, 속에서 빛이 비쳐 나오는 젤리처럼 보입니다. 지붕 블록은 두 장에서 거의 같습니다.

투과 끔(왼쪽)과 켬(오른쪽). sss가 0.3인 지붕은 거의 그대로이고 0.9인 잎이 크게 달라집니다. 렌더: 직접.

설탕 코팅 같은 광택

반짝임, 즉 정반사 하이라이트는 가장 흔하게는 블린-퐁 모델로 계산합니다. 빛 방향과 시선 방향의 중간 벡터 h를 구하고 노멀이 h에 가까울수록 밝게 합니다.

h=l+v∥l+v∥,Is=ks (n⋅h)s\mathbf{h} = \frac{\mathbf{l} + \mathbf{v}}{\lVert \mathbf{l} + \mathbf{v} \rVert}, \qquad I_s = k_s\,(\mathbf{n} \cdot \mathbf{h})^{s}

지수 s가 클수록 하이라이트가 작고 날카로워집니다. 지수를 크게, 세기도 크게 주면 작고 하얀 점이 쨍하게 박힌 플라스틱 장난감이 됩니다. 과자의 광택은 그렇지 않습니다. 설탕 코팅이나 시럽을 바른 겉면은 표면이 아주 매끈하지 않아서 하이라이트가 넓게 번지고 그 가운데에 조금 더 밝은 부분이 있습니다.

그래서 이 렌더러는 하이라이트를 두 겹으로 둡니다. 지수가 작은 넓은 겹(세기 0.3) 하나와 지수를 2.5배로 키운 좁은 겹(세기 0.5) 하나입니다. 그 위에 재질마다 glaze(광택의 세기)와 shine(지수)을 따로 줍니다. 지붕과 버섯 갓처럼 사탕 같아야 하는 곳은 glaze가 1.0, shine이 34–36입니다. 흙은 glaze 0.45, shine 10으로 낮고 넓습니다.

극좌표로 그린 하이라이트 모양 두 개입니다. 왼쪽 단단한 플라스틱(지수 128)은 반사 방향을 따라 가늘고 길쭉한 파란 꽃잎 모양이고, 오른쪽 설탕 코팅(지수 8)은 같은 방향으로 퍼진 둥글고 넓은 분홍 덩어리입니다. 둘 다 빛은 법선에서 40도 기울어져 들어옵니다.

// 설명을 위해 단순화한 예제
vec3 H = normalize(L + V);
float nh = max(dot(N, H), 0.0);
float spec = 0.3 * pow(nh, shine)           // 넓은 겹
           + 0.5 * pow(nh, shine * 2.5);    // 좁은 겹
color += sunColor * glaze * spec * fresnel * lambert * shadow;

마지막 줄의 fresnel은 바로 다음에 설명합니다. 하이라이트에 그림자(shadow)를 곱하는 것도 잊으면 안 됩니다. 그늘 속에서 반짝이는 과자는 금방 어색해 보입니다.

솔직히 말하면 이 광택은 눈에 확 띄지 않습니다. 평평한 윗면은 대개 하늘을 보고 있어서 중간 벡터 h와 잘 맞지 않습니다. 그래서 하이라이트는 주로 둥글린 모서리와 꽃, 버섯 같은 둥근 소품에 걸립니다. 밝은 파스텔 윗면에 걸리더라도 톤 매핑 곡선이 밝은 쪽을 부드럽게 눌러 주기 때문에 하얗게 튀지 않고 살짝 밝아지는 정도에 그칩니다. 의도한 쪽이긴 하지만 아래 실험실에서 켜고 끌 때 차이를 찾으려면 어디를 볼지 알아야 합니다. 재료 견본의 처음 각도는 일부러 해를 마주 보게 잡아서 윗면이 하이라이트 방향에 들어오게 했습니다. 그때 가장 잘 보이는 곳이 판자와 지붕의 윗면입니다.

판자 블록과 지붕 블록을 같은 각도에서 찍은 두 장입니다. 왼쪽 하이라이트를 끈 쪽은 두 블록 윗면이 고르게 무광입니다. 오른쪽 하이라이트를 켠 쪽은 판자 윗면과 지붕 윗면 가운데에 둥근 모서리 안쪽을 따라 조금 더 밝고 하얀 네모가 떠 있습니다.

설탕 코팅 하이라이트 끔(왼쪽)과 켬(오른쪽). 렌더: 직접.

가장자리의 빛

유리창을 정면에서 보면 바깥이 잘 보이지만 비스듬히 보면 반사가 강해져 거울처럼 됩니다. 표면을 스치듯 볼수록 반사율이 올라가는 이 현상을 프레넬 효과라고 합니다. 정확한 프레넬 식은 꽤 복잡해서 실시간 렌더링에서는 거의 언제나 Christophe Schlick의 An Inexpensive BRDF Model for Physically-based Rendering(1994)에 나온 근사를 씁니다.

F(θ)=F0+(1−F0) (1−cos⁡θ)5,cos⁡θ=n⋅vF(\theta) = F_0 + (1 - F_0)\,(1 - \cos\theta)^5, \qquad \cos\theta = \mathbf{n} \cdot \mathbf{v}

F0는 정면에서 볼 때의 반사율입니다. 표면을 정면에서 보면(cos θ = 1) F0, 스치듯 보면(cos θ = 0) 1이 됩니다. 유리나 플라스틱 같은 물체는 F0가 0.04 안팎이라 정면에서는 거의 반사하지 않다가 아주 비스듬해져서야 반사가 치솟습니다.

이 렌더러는 이 모양을 두 군데에 씁니다. 하나는 앞의 광택에 곱하는 fresnel입니다. F0를 0.6으로 꽤 높게 잡아서 정면에서도 광택이 살아 있고 가장자리로 갈수록 조금 더 밝아지게 했습니다. 물리적으로 맞는 값이라기보다 보기 좋은 값입니다.

다른 하나는 따로 더하는 테두리 빛(림 라이트)입니다. 같은 1 - n·v 꼴을 지수 3.5로 올리고 하늘색을 섞어 더합니다. 아래 그림은 두 값이 보는 각도에 따라 어떻게 변하는지를 실제 상수로 그렸습니다.

가로축이 시선과 법선 사이 각도 0도부터 90도, 세로축이 0부터 1인 그래프에 곡선 세 개가 있습니다. 분홍 실선인 광택용 값은 0.6에서 수평으로 가다가 60도 언저리부터 올라가 90도에서 1이 됩니다. 주황 실선인 테두리 빛은 0에서 거의 평평하다가 50도 넘어서부터 가파르게 올라 90도에서 1이 됩니다. 파란 점선인 참고용 F0 0.04 곡선은 주황 곡선과 비슷하지만 조금 더 늦게 올라갑니다.

둥근 과자를 창가에 두면 가장자리가 하늘빛을 받아 밝게 떠오르는데 그 느낌을 노린 항입니다. 이것은 Schlick 근사를 빌려 왔을 뿐 물리 모델이 아니라 연출용 항이라는 점을 밝혀 둡니다.

// 설명을 위해 단순화한 예제
float fresnel = 0.6 + 0.4 * pow(1.0 - max(dot(N, V), 0.0), 5.0);  // F0 = 0.6
float rimF = pow(1.0 - max(dot(N, V), 0.0), 3.5);
color += (skyColor * 0.55 + sunColor * 0.25 * shadow) * rim * rimF * 0.45 * ao;

블록 세계에서 이 테두리 빛은 생각보다 중요합니다. 면이 평평한 블록은 n·v가 면 전체에서 같아서 림 라이트가 잘 안 생깁니다. 첫 글에서 모서리 노멀을 둥글게 기울여 놓은 덕분에 모서리를 따라 가느다란 밝은 테두리가 생깁니다. 앞 글에서 해 둔 일이 여기서 다시 쓰입니다. 다만 이 효과는 작습니다. 재료 견본에서 가장 잘 보이는 곳은 잎 블록의 어두운 옆면 가장자리입니다.

잎 블록과 물 블록을 같은 각도에서 찍은 두 장입니다. 왼쪽 림을 끈 쪽의 잎 블록 왼쪽 옆면은 짙은 청록으로 가라앉아 있습니다. 오른쪽 림을 켠 쪽은 같은 옆면이 회색빛으로 살짝 밝아지고, 잎과 물 블록의 세로 모서리를 따라 얇게 밝은 선이 생깁니다.

림 끔(왼쪽)과 켬(오른쪽). 렌더: 직접.

마지막으로 색 자체에도 손을 하나 댔습니다. 그늘진 부분의 색을 회색 쪽으로 빼지 않고 오히려 채도를 조금 올립니다. 반투명 값이 높은 재질일수록 더 올립니다. 그늘에서 색이 탁해지면 과자보다는 먼지 앉은 모형처럼 보이기 때문입니다. 그늘을 푸른 보랏빛으로 물들이는 이야기는 두 번째 글에서 자세히 다뤘습니다.

직접 켜고 꺼 보기

아래 실험실에서 지금까지의 단계를 하나씩 켜고 끄며 비교할 수 있습니다.

과자 재료 실험실Interactive
장면
마감
프레임 해부
켜짐: 무늬 · 투과 · 설탕 코팅 하이라이트 · 림끌어서 돌려 보기 · 방향키
처음 각도 기준 앞줄 왼쪽부터 잔디 · 흙 · 돌 · 모래 · 길, 뒷줄 통나무 · 판자 · 지붕 · 잎 · 물

잔디, 흙, 돌, 통나무, 판자, 지붕, 잎, 길, 모래, 물 블록을 하나씩 쟁반 위에 올려 놓고, 블록 면에 그리는 무늬, 빛이 살짝 비쳐 나오는 투과, 설탕 코팅 같은 넓고 부드러운 하이라이트, 가장자리 림을 하나씩 켜고 끕니다. 섬 전체로 바꾸면 틸트시프트와 색보정도 켜고 끌 수 있고, 프레임을 알베도, 노멀, 깊이, AO, 그림자로 나눠 볼 수 있습니다. 해 위치를 옮기거나 끌어서 돌려 하이라이트가 움직이는 모습을 볼 수 있습니다.

처음에는 '재료 견본' 장면이 열립니다. 쟁반 위에 블록을 하나씩 떨어뜨려 놓아서 블록마다 모서리 열두 개가 모두 둥글고 무늬와 하이라이트가 화면에 크게 잡힙니다. 앞줄은 왼쪽부터 잔디, 흙, 돌, 모래, 길이고 뒷줄은 통나무, 판자, 지붕, 잎, 물입니다. '마감' 줄의 무늬, 투과, 설탕 코팅 하이라이트, 림을 하나씩 켜고 끌 수 있습니다. '해 위치' 막대로 해를 옮기거나 장면을 끌어 돌리면 하이라이트와 투과가 따라 움직입니다.

'장면'을 '섬 전체'로 바꾸면 첫머리의 섬이 나오고 '후처리' 줄에 틸트시프트와 색보정이 생깁니다. 섬 전체에서는 켜고 끈 차이가 보이도록 틸트시프트를 첫머리 섬의 2.6배, 색보정을 2.5배로 세게 걸었습니다. 빛 번짐(블룸)도 첫머리 섬처럼 켜져 있지만 아주 약하게 걸려 있고 따로 켜고 끄는 스위치는 없습니다. '프레임 해부'에서는 화면을 알베도, 노멀, 깊이, AO, 그림자로 나눠 볼 수 있습니다.

하나씩 끄다 보면 어느 하나가 결정적이라기보다 작은 차이가 쌓여서 먹음직스러움이 된다는 것을 느끼실 수 있을 겁니다.

미니어처의 마지막 한 겹

재질까지 입혀도 아직 화면은 커다란 세계를 멀리서 본 것처럼 보일 수 있습니다. 탁자 위에 놓인 작은 디오라마처럼 보이게 하는 마지막 한 겹은 후처리입니다.

실제 크기의 거리를 높은 곳에서 찍은 사진의 위아래를 흐리게 하면 장난감 마을처럼 보입니다. 틸트시프트 렌즈로 찍거나 나중에 흐림을 더해 만드는 효과입니다. 왜 그렇게 보이는지는 Held, Cooper, O'Brien, Banks의 Using Blur to Affect Perceived Distance and Size가 실험으로 다뤘습니다.

원리는 이렇습니다. 작은 물체를 가까이서 찍으면 초점이 맞는 깊이의 범위(피사계 심도)가 아주 얕아서 조금만 앞이나 뒤로 가도 흐려집니다. 우리 눈은 경험으로 이 관계를 알고 있어서 장면 안에서 흐림이 깊이에 따라 빠르게 변하면 그 장면이 가까이 있는 작은 것이라고 받아들입니다. 논문은 흐림의 패턴과 상대적인 깊이 단서를 함께 보고 크기를 판단한다고 설명합니다.

흥미로운 결과가 하나 더 있습니다. 사진 앱처럼 화면 위아래로 단순하게 흐림을 거는 방식(세로 그라디언트)도 효과가 있지만 그 그라디언트가 장면의 깊이 변화와 같은 방향으로 놓였을 때의 이야기입니다. 깊이에 맞춘 흐림보다는 덜 일관된 결과를 냈습니다.

이 렌더러는 그래서 둘을 섞습니다. 기본은 깊이 버퍼에서 구한 흐림입니다. 카메라가 바라보는 섬의 중심 깊이를 초점으로 두고 거기서 멀어질수록 흐림 반경(착란원, circle of confusion)을 키웁니다. 여기에 화면 위아래 띠에서도 흐림을 조금 더해 렌즈의 느낌을 보탭니다. 위에서 내려다보는 디오라마에서는 화면 아래가 대체로 가깝고 위가 대체로 멀어서 이 띠가 깊이 변화와 같은 방향으로 놓입니다.

식으로 쓰면 이렇습니다. z는 픽셀의 시야 깊이, z_f는 초점 깊이, R은 섬 전체를 감싸는 구의 반지름, y는 화면 세로 위치(0–1)입니다.

cdepth=smoothstep⁡(0.55R,  1.55R,  ∣z−zf∣)c_{\text{depth}} = \operatorname{smoothstep}\big(0.55R,\; 1.55R,\; |z - z_f|\big)
cscreen=smoothstep⁡(0.34,  0.62,  ∣y−0.5∣)c_{\text{screen}} = \operatorname{smoothstep}\big(0.34,\; 0.62,\; |y - 0.5|\big)
c=clamp⁡(max⁡(cdepth,  0.7 cscreen),  0,  1)c = \operatorname{clamp}\big(\max(c_{\text{depth}},\; 0.7\,c_{\text{screen}}),\; 0,\; 1\big)

초점 앞뒤로 R의 0.55배까지는 완전히 선명하고 거기서 R만큼 더 가는 동안 흐림이 차오릅니다. 화면 띠는 가운데에서 위아래로 화면 높이의 34%만큼 떨어진 곳부터 시작해서 62%가 되는 곳(사실상 화면 끝)에서 가장 세집니다. 0.7을 곱해 깊이 쪽보다 약하게 둡니다. 섬이 화면을 거의 채우는 구도라서 이 값이면 섬의 가운데는 대부분 선명하게 남고 화면 위아래 끝과 섬 앞쪽 가장자리만 살짝 흐려집니다.

아래 그림은 이 식을 그대로 칠한 지도입니다. 가로는 초점에서 떨어진 깊이, 세로는 화면 높이입니다. 진한 분홍일수록 흐림이 큽니다.

흐림 정도를 분홍 농도로 칠한 직사각형 지도 두 개입니다. 왼쪽 첫머리 섬 지도는 초점에서 0.55R까지인 왼쪽 3분의 1 정도가 하얗게 선명하고, 그 오른쪽으로 갈수록 분홍이 짙어지며, 위아래 끝에는 옅은 분홍 띠가 있습니다. 오른쪽 실험실 지도는 선명한 영역이 왼쪽 가운데의 작은 사각형으로 줄어들고, 나머지는 거의 다 짙은 분홍입니다. 아래에는 섬이 놓인 깊이가 대략 0에서 1R까지라는 표시가 있습니다.

이 렌더러는 단순해서 절반 해상도 버퍼에서 가로와 세로로 한 번씩 나눠 거는 흐림 두 번이 전부입니다. 흐림 반경은 픽셀마다 착란원을 따르고 가장 클 때 화면 높이의 1% 남짓입니다. 다만 초점이 맞은 선명한 픽셀이 주변의 흐린 픽셀 쪽으로 번져 나가지 않도록 각 샘플은 자기 착란원이 가운데까지 닿는 만큼만 섞이게 했습니다. 이걸 빼면 선명한 오두막 테두리에 흐린 후광이 생깁니다.

// 설명을 위해 단순화한 예제: 한 방향(가로 또는 세로)의 흐림
float c0 = cocAt(uv);
for (int i = -6; i <= 6; i++) {
  float t = float(i) / 6.0;
  vec2 s = uv + dir * t * maxRadius * c0;      // maxRadius: 화면 높이의 1.05%
  float c = cocAt(s);
  float reach = clamp(c * 1.4 - abs(t) * c0 + 0.25, 0.0, 1.0);  // 그 샘플의 흐림이 여기까지 닿는가
  float w = exp(-t * t * 2.2) * (i == 0 ? 1.0 : reach);
  sum += texture(src, s) * w;  wsum += w;
}
// 합성할 때는 smoothstep(0, 0.6, c)만큼 이 흐린 결과를 원래 화면에 섞습니다.

나머지 두 단계는 짧습니다. 빛 번짐(블룸)은 HDR 버퍼에서 가장 밝은 채널이 1.15를 넘는 부분만 뽑아 4분의 1 해상도 버퍼에서 가로·세로로 두 번씩 흐린 뒤 톤 매핑 전에 0.35를 곱해 원래 화면에 더합니다. 물 위의 반짝임과 유리창 언저리가 은은하게 번지는 정도로만 약하게 잡았습니다.

색 보정은 톤 매핑 뒤에 합니다. 톤 매핑은 채널 중 가장 밝은 값을 기준으로 눌러서 파스텔의 색조와 채도가 회색으로 바래지 않게 하는 부드러운 곡선을 씁니다. 톤 매핑이 0.6 아래의 값은 그대로 두고 그 위만 부드럽게 눌러 주기 때문에 밝은 파스텔 면은 이 어깨 구간에 걸립니다. 그다음 어두운 부분을 라벤더 쪽으로 살짝 들어 올리고, 밝은 부분을 아주 조금 따뜻하게 하고, 채도를 5% 올리고, 가장자리를 은은하게 어둡게 합니다. 마지막으로 눈에 보이지 않을 만큼의 노이즈를 더해 하늘빛 그라디언트에 띠가 생기지 않게 합니다.

같은 각도에서 본 블록 섬 두 장을 나란히 놓았습니다. 왼쪽은 후처리를 모두 끈 것으로 지붕부터 앞쪽 흙 절벽까지 전부 선명합니다. 오른쪽은 후처리를 켠 것으로 연못과 주민이 있는 가운데는 선명하지만, 뒤쪽 지붕과 나무 꼭대기, 앞쪽 흙 절벽과 섬 아래 가장자리가 크게 흐려지고 색이 조금 더 따뜻하고 진합니다.

후처리 끔(왼쪽)과 켬(오른쪽). 차이가 보이도록 실험실의 섬 전체와 같은 세기(틸트시프트 2.6배, 색보정 2.5배)로 찍었습니다. 첫머리 섬은 이보다 훨씬 약합니다. 렌더: 직접.

제 눈에는 후처리를 켠 오른쪽이 탁자 위에 놓인 작은 모형처럼, 끈 왼쪽이 한결 큰 땅덩어리처럼 보입니다. 같은 블록, 같은 재질인데도 그렇습니다. 미니어처 느낌의 상당 부분이 블록 자체가 아니라 카메라에서 온다는 점이 저에게는 이 작업에서 가장 의외였습니다.

두 효과를 따로 떼어 보면 무게가 어디에 있는지 분명해집니다.

같은 섬을 나란히 놓은 두 장입니다. 왼쪽은 틸트시프트만 켠 것으로, 지붕과 나무 꼭대기, 앞쪽 흙 절벽이 크게 흐려지고 가운데 연못 주변만 선명합니다. 오른쪽은 색보정만 켠 것으로, 전부 선명하고 후처리를 끈 섬과 거의 같아 보이며 색이 아주 조금 따뜻하고 가장자리가 살짝 어둡습니다.

틸트시프트만(왼쪽)과 색보정만(오른쪽), 둘 다 실험실 섬 전체의 세기. 렌더: 직접.

미니어처처럼 보이게 하는 일은 거의 틸트시프트가 합니다. 색보정은 섬의 분위기를 조금 따뜻하고 부드럽게 맞추는 정도입니다. 세기를 2.5배로 올려도 나란히 놓아야 차이가 보입니다.

한 프레임 해부

이 렌더러의 패스는 크게 셋입니다.

  1. 그림자 깊이. 해의 위치에서 섬을 직교 투영으로 2048×2048 깊이 텍스처에 그립니다. 색은 계산하지 않습니다. 섬 메시 하나와 주민 메시 하나, 드로 콜 2번입니다.
  2. 조명 패스. 카메라에서 같은 두 메시를 그리며(드로 콜 2번), 하나의 셰이더 안에서 무늬, 둥근 모서리, 조명, 그림자, 반투명, 광택, 테두리 빛을 모두 계산해 HDR 버퍼에 씁니다. 이 시리즈의 세 글에서 다룬 계산이 거의 다 이 한 패스에 들어 있습니다.
  3. 후처리. 틸트시프트 흐림이 절반 해상도에서 가로, 세로로 2번, 블룸이 4분의 1 해상도에서 밝은 부분 뽑기 1번과 가로·세로 흐림 두 차례로 4번, 마지막으로 이것들을 합쳐 톤 매핑과 색 보정까지 하는 합성 1번입니다. 후처리는 모두 화면을 덮는 삼각형 하나를 그리는 방식입니다.

조명 패스의 셰이더는 중간값을 화면에 그대로 내보내는 디버그 모드가 있습니다. 같은 프레임을 단계별로 꺼내 보면 이렇습니다.

첫머리 섬의 같은 프레임을 여섯 칸으로 나눠 보여 줍니다. 윗줄은 왼쪽부터 알베도, 노멀, 깊이입니다. 알베도는 그늘 없이 무늬와 바탕색만 있고, 노멀은 윗면이 초록, 앞쪽 옆면이 파랑, 오른쪽 옆면이 빨강이며 나무 덩어리에는 색이 얼룩덜룩하게 섞여 있습니다. 깊이는 가까운 앞쪽이 밝고 먼 뒤쪽이 어두운 회색입니다. 아랫줄은 AO, 그림자, 최종입니다. AO는 거의 흰색이고 지붕 단 사이와 계단 아래, 연못 둘레 같은 오목한 구석만 회색입니다. 그림자는 해가 닿는 곳만 흰색이라 나무와 오두막의 그림자, 해를 등진 오른쪽 옆면이 검정입니다. 최종은 색과 빛이 모두 들어간 섬입니다.

한 프레임의 디버그 출력 여섯 가지. 실험실의 '프레임 해부'와 같은 출력입니다. 렌더: 직접.

알베도에는 무늬만 있고 빛이 없습니다. 노멀에서는 블록 모서리마다 색이 부드럽게 바뀌는 띠가 보이는데 첫 글의 모서리 둥글리기입니다. 잎 덩어리의 얼룩은 앞에서 말한 봉우리마다 노멀을 휘게 한 흔적입니다. 깊이는 틸트시프트가 흐림을 정할 때 읽는 값입니다. AO에서는 블록이 맞닿는 오목한 구석만 어둡고 그림자에서는 해가 닿지 않는 곳과 해를 등진 면이 드러납니다. 이것들이 하나의 셰이더 안에서 곱해지고 더해져 마지막 장면이 됩니다.

규모는 이렇습니다. 첫머리 섬은 삼각형 52,988개이고 한 프레임에 드로 콜이 12번입니다(그림자 2, 조명 2, 틸트시프트 2, 블룸 5, 합성 1). 걸리는 시간은 Apple M2 칩이 든 맥의 헤드리스 Chrome에서 1188×743 픽셀로 잰 값이 한 프레임 5ms 안팎이었습니다. 120프레임을 연달아 그리면서 프레임마다 픽셀 하나를 읽어 와 GPU가 일을 끝낼 때까지 기다리게 하고 그 전체 시간을 나눈 값입니다. 그래서 순수한 GPU 시간이 아니라 기다림까지 들어간 넉넉한 값이고 기기와 화면 크기에 따라 크게 달라집니다. 블록 세계는 다른 블록에 가려 보이지 않는 면을 메시를 만들 때 미리 버릴 수 있어서 원래 가볍습니다. 이 글에서 더한 무늬와 재질은 모두 프래그먼트 셰이더 안의 계산이라 삼각형 수를 늘리지 않습니다.

이 글은 겉면과 카메라를 다뤘습니다. 무늬로 소재를 알아보게 하고, 반투명과 광택과 테두리 빛으로 과자의 마감을 입히고, 흐림으로 섬을 탁자 위에 올려놓았습니다.

참고 자료

공식 인터뷰

무늬와 노이즈

재질과 조명

블록 메시

후처리

더 읽을거리