텍스트-이미지 생성Text-to-Image
글로 적은 대로 그림을 만들어 내는 일
- 텍스트-이미지 생성은 글로 적은 내용을 그림으로 만들어 주는 일이에요. 그림 실력이 없어도 결과물을 얻을 수 있어요.
- 어딘가에서 사진을 찾아 오는 것이 아니에요. 그 자리에서 새로 만들어진 그림이에요.
- 같은 문장을 넣어도 매번 다른 그림이 나와요. 마음에 들 때까지 여러 번 만들어 보는 것이 보통이에요.
- 적은 내용이 짧으면 나머지는 알아서 채워져요. 원하는 것이 있으면 적어 줘야 해요.
- 글자, 손가락 개수, 정확한 수량처럼 잘 안 되는 것이 아직 있어요.
목차
1비유로 이해하기
제과점 주문서에 분홍 크림에 작은 꽃 다섯 송이, 가운데에는 딸기라고 적어 내면 진열장에 있던 케이크를 꺼내 주지 않아요. 적힌 대로 그 자리에서 새로 꾸며 줘요.
적지 않은 부분은 가게가 알아서 채워요. 크림의 결이나 꽃의 방향까지 적는 사람은 없으니 늘 하던 대로 얹혀요. 그래서 같은 주문서를 두 번 내밀어도 완전히 같은 케이크는 나오지 않아요.
원하는 것이 뚜렷하다면 그만큼 적어야 해요. 다섯 송이라고 적어야 다섯 송이가 오르고, 분홍이라고 적어야 그 색이 나와요. 글로 그림을 만드는 일도 이 주문서와 같아요.
2자세히 알아보기
글이 먼저 뜻으로 바뀌어요
적어 넣은 문장은 곧바로 그림이 되지 않아요. 먼저 문장의 뜻을 숫자 묶음으로 바꾸는 단계를 거쳐요. 이 단계에서 노란 들판과 황금빛 밭처럼 표현은 달라도 뜻이 가까운 말은 비슷한 값이 돼요.
그래서 낱말을 하나하나 옮겨 붙이는 방식과 결과가 달라요. 문장 전체의 분위기가 값에 담기고, 그림을 만드는 쪽은 그 값을 방향 삼아 움직여요. 맞춤법이 조금 틀려도 그럭저럭 알아듣는 것이 이 덕분이에요.
한글로 적어도 대체로 통하지만, 학습에 쓰인 설명글이 영어에 많이 치우쳐 있어서 표현에 따라 결과가 흔들릴 때가 있어요. 원하는 그림이 잘 안 나오면 같은 내용을 다른 말로 바꿔 적어 보는 것이 도움이 돼요.
그림은 얼룩에서 시작해요
그림을 만드는 쪽은 흰 종이가 아니라 아무 뜻 없는 얼룩투성이 화면에서 출발해요. 여기에 대고 문장의 뜻을 참고하며 얼룩을 조금씩 걷어 내요. 몇십 번을 걷어 내면 얼룩 사이에서 형태가 서서히 자리를 잡아요.
화면이 서서히 또렷해지는 모습을 보여 주는 서비스가 많은데, 그것이 연출이 아니라 실제로 벌어지는 일이에요. 걷어 낼 때마다 문장을 다시 참고하기 때문에 적어 넣은 말은 처음 한 번이 아니라 내내 영향을 줘요.
같은 문장에도 다른 그림이 나와요
출발점이 되는 얼룩은 매번 새로 뿌려져요. 어느 자리가 짙었는지에 따라 첫 걸음의 판단이 달라지고, 그 차이가 끝까지 이어져요. 그래서 같은 문장을 넣어도 구도와 색이 다른 그림이 나와요.
이 성질은 불편한 점이자 쓸모 있는 점이에요. 한 번에 원하는 그림을 얻기는 어렵지만, 여러 장을 만들어 놓고 그중 마음에 드는 것을 고를 수 있어요. 마음에 든 장을 기준으로 조금씩 손보는 방법도 있어요.
잘 되는 것과 잘 안 되는 것
풍경, 사물, 그림체가 뚜렷한 삽화는 대체로 잘 나와요. 반대로 아직 어려운 것들이 있어요. 간판이나 문구의 글자는 자주 뭉개지고, 손가락이나 다리처럼 개수와 관절이 정해진 부분도 어그러지기 쉬워요.
숫자를 세는 일도 약해요. 다섯 송이라고 적어도 네 송이나 여섯 송이가 나오는 일이 흔해요. 여러 대상의 위치 관계를 지시하는 것도 마찬가지라, 왼쪽에 무엇 오른쪽에 무엇이라고 적어도 자리가 바뀌곤 해요.
원하는 것이 잘 나오지 않을 때는 문장을 길게 늘이기보다 핵심을 앞쪽에 두고 필요 없는 말을 빼는 편이 나아요. 넣고 싶지 않은 것을 따로 적어 두는 칸이 있는 서비스도 있어요.
3조금 더 정확하게
텍스트-이미지 생성은 문장을 벡터로 바꾸는 부분과, 그 벡터를 조건으로 삼아 이미지를 만들어 내는 부분을 이어 붙인 구조예요. 만들어 내는 쪽은 대체로 노이즈에서 시작해 여러 단계에 걸쳐 이미지를 다듬는 디퓨전 방식을 쓰고, 문장에 담긴 조건은 단계마다 다시 반영돼요. 학습에는 그림과 그 그림을 설명하는 글을 짝지은 방대한 자료가 쓰여요.
비유가 어긋나는 지점이 있어요. 제과점에는 진열장에 실제 재료가 놓여 있지만, 모델 안에는 꺼내 붙일 그림 조각이 저장되어 있지 않아요. 학습에 쓰인 그림은 보관되지 않고, 결과물은 매번 계산으로 새로 만들어져요. 다만 아주 여러 번 등장한 작품은 그와 매우 닮은 결과가 나오기도 해요.
또 가게 주인은 주문서를 읽고 뜻을 이해하지만, 모델은 글과 그림이 함께 나타난 통계를 익혔을 뿐이에요. 그래서 사람에게는 당연한 지시가 통하지 않는 일이 생겨요.
4직접 해보기
5흔한 오해
인터넷에서 비슷한 사진을 찾아 붙여 준다고 생각하기 쉽지만, 실제로는 얼룩 화면에서 시작해 매번 새로 만들어 낸 그림이에요.
문장을 길게 자세히 적을수록 좋다고 여기기 쉽지만, 실제로는 지시가 많아지면 서로 부딪혀서 핵심이 묻히기도 해요.
만든 그림은 무조건 마음대로 써도 된다고 생각하기 쉽지만, 실제로는 서비스 약관과 저작권·초상 문제를 함께 살펴야 해요.
7한 줄 요약
그러니까텍스트-이미지 생성은 적어 넣은 글을 방향 삼아 얼룩 화면에서 새 그림을 만들어 내는 일이고, 같은 문장에도 매번 다른 결과가 나와요.
잘못된 내용이나 더 좋은 비유가 있나요? 수정 제안 보내기 · 마지막 수정2026-09-02