AI 시대 최소한의 미적분 상식 7

“AI는 정답 그림을 미리 알고 베껴 그리는 것이 아닙니다. 수많은 이미지에서 배운 ‘자연스러운 방향’을 바탕으로, 무작위 노이즈에서 조금씩 의미 있는 형태를 찾아 나갑니다. 그리고 그 방향을 배우고 설명하는 수학적 기반에 ‘미분’이 있습니다.”

문장을 입력하면 불과 몇 초 만에 거장의 화풍을 담은 정교한 이미지를 짠 하고 그려내는 생성형 AI, 그 신기한 마법의 중심에는 '디퓨전 모델(Diffusion Model)'이 있습니다.

대부분의 사람들은 AI가 빈 도화지 위에 붓으로 쓱쓱 그림을 그려 나간다고 상상합니다. 하지만 최첨단 생성 AI가 세상을 놀라게 한 진짜 비결은 '처음부터 그리는 것'이 아니라, 형체를 알 수 없는 거친 잡음(노이즈) 속에서 조금씩 형태를 찾아 나가는 과정에 있습니다.

그리고 이 무작위 노이즈 속에서 AI가 길을 잃지 않도록 가장 자연스러운 방향을 안내해 주는 핵심 언어가 바로 우리가 앞에서 살펴본 '미분'입니다.

1. 디퓨전 AI가 그림을 익히고 만들어내는 2가지 단계

디퓨전 모델이 작동하는 원리는 크게 '학습할 때'와 '그림을 만들 때'로 나누어 볼 수 있습니다.

1) 학습할 때: "노이즈를 일부러 섞으며 방향 감각을 익힌다"

AI는 처음부터 노이즈에서 그림을 짜잔 하고 만들어내지 못합니다. 먼저 수많은 깨끗한 이미지에 인위적으로 노이즈를 약간 섞어가며 어둡고 지지직거리는 상태로 만듭니다. AI는 깨끗한 이미지에 조금씩 노이즈를 섞은 다양한 상태를 학습하면서, “여기에 어떤 노이즈가 섞였는가?”, 그리고 “이 상태에서 더 깨끗하고 자연스러운 이미지 쪽으로 가려면 어떻게 바꾸어야 하는가?”를 학습합니다.

첫 번째 미분의 역할 (오차 수정): AI가 예측한 방향이 얼마나 틀렸는지를 계산(손실함수)한 뒤, 미분과 역전파를 이용해 AI 내부의 수수께끼 다이얼(가중치)들을 정교하게 재조정합니다.

2) 그림을 만들 때: "아무것도 없는 노이즈에서 시작되는 여행"

학습을 마친 AI 앞에는 이제 정답 이미지가 존재하지 않습니다. AI는 완전한 무작위 노이즈 화면을 마주하고 시작합니다. 이때 AI는 자신이 그동안 학습한 신경망을 작동시켜 "지금 이 노이즈 상태에서 어떤 방향으로 다가가야 세상에 존재하는 자연스러운 이미지에 가까워지는가?"를 매 순간 예측합니다. 그리고 그 방향을 향해 조금씩 이미지를 업데이트하며 선명한 그림을 완성해 냅니다.

두 번째 미분의 역할 (자연스러운 방향 안내): 무수히 많은 픽셀의 바닷속에서 '데이터가 자연스러운 형태로 존재할 가능성이 높은 방향과 기울기(Gradient)'를 계산하여 표현해 주는 도구가 바로 미분입니다.

2. 미분은 노이즈를 깎는 칼이 아닌, '방향을 알려주는 수학적 언어'

결국 "미분이 무언가를 깎아낸다"기보다는, 미분은 AI가 노이즈 속에서 어느 방향으로 움직여야 하는지를 배우고 표현하는 정교한 수학적 언어라고 보는 것이 훨씬 정확합니다.

- 시작: 완전한 무작위 노이즈 (아무것도 알아볼 수 없습니다.)

- 초기: 큰 색감과 대략적인 구도가 나타나기 시작합니다.

- 중간: 사물과 배경의 형태가 점차 구체화됩니다.

- 후반: 질감과 세부적인 특징이 다듬어집니다.

- 완성: 우리가 알아볼 수 있는 자연스럽고 정교한 이미지가 나타납니다.

(실제 생성 단계의 수와 방식은 보델과 샘플링 방법에 따라 달라질 수 있습니다.)

물론 AI가 아무 방향으로나 이동하는 것은 아닙니다. 우리가 입력한 “눈 덮인 산 위에 서 있는 고양이” 같은 문장은 일종의 목적지 안내판 역할을 합니다. AI는 학습한 이미지의 자연스러운 구조를 따르면서도, 동시에 사용자가 입력한 문장의 의미에 맞는 방향으로 이미지를 구체화해 나갑니다.

3. 무에서 유를 창조하는 '방향의 수학'

AI가 무에서 유를 창조하며 보여주는 경이로움의 실체는, 찰나의 마법이 아니라 미분을 통해 오차를 줄이는 법을 배우고, 노이즈 속에서 가장 자연스러운 형태를 찾아 수십 번씩 걸음을 옮긴 정교한 여정이 만든 결과입니다.

수학 공식은 멀게 느껴질지 몰라도, 오늘날 AI가 그려내는 화려한 그림의 곡선 하나하나에는 바로 미분이 알려주는 가장 자연스럽고 정교한 방향의 언어가 묵묵히 작동하고 있었던 셈입니다. 거친 원석 속에서 숨겨진 형상의 모습을 읽어내어 완성작을 찾아가는 조각가들의 작업처럼 말입니다.

"나는 대리석 안에서 천사를 보았고, 내가 그를 자유롭게 할 때까지 조각했다."

— 미켈란젤로 부오나로티 (Michelangelo Buonarroti)