ChatGPT vs Gemini 이미지 정확도 테스트|10가지 조건을 동시에 주면 누가 더 잘 지킬까?
비교 조건과 채점 범위
아래 10개 조건을 사용한 한 차례 비교입니다. ChatGPT가 제시한 두 이미지 중 첫 번째와 Gemini가 제시한 한 이미지를 평가했습니다. 정확한 실행일·모델명·요금제는 이 글에 기록되어 있지 않습니다.
O는 충족, X는 미충족, △는 부분 충족 또는 판단 유보입니다. 표의 판정은 작성자의 육안 평가입니다. 인물의 손은 화면의 좌우와 구분해서 봐야 합니다. 점수 차이는 여기 실린 결과에만 해당하며 반복 실험으로 확인한 서비스 순위가 아닙니다.
ChatGPT와 Gemini의 이미지 생성 기능을 몇 차례 비교해보면서 한 가지 궁금증이 생겼습니다.
“그림을 잘 그리는 것과 사용자의 지시를 정확하게 지키는 것은 같은 능력일까?”
예쁜 이미지를 만드는 것도 중요하지만 실제로 AI 이미지를 업무나 콘텐츠 제작에 사용한다면 내가 요청한 조건을 얼마나 정확하게 반영하는지도 중요합니다.
그래서 이번에는 조금 다른 테스트를 해봤습니다.
ChatGPT와 Gemini에게 완전히 동일한 10가지 조건을 주고 한 장의 만화 스타일 이미지를 만들어 달라고 요청했습니다.
AI 이미지 생성에서 '정확도'가 중요한 이유
AI 이미지 생성에서는 그림이 얼마나 예쁘고 자연스러운지도 중요합니다.
하지만 실제로 블로그 썸네일이나 광고 이미지, 업무용 자료처럼 목적이 정해진 이미지를 만들 때는 사용자가 요청한 조건을 얼마나 정확하게 지키느냐도 매우 중요합니다.
예를 들어,
- 사람을 정확히 3명만 넣어 달라고 했는데 4명이 등장하거나
- 빨간색 물건을 요청했는데 다른 색으로 표현되거나
- 오른쪽과 왼쪽의 위치가 바뀌거나
- 이미지 안에 넣어 달라고 한 문구가 틀린다면
그림 자체가 아무리 멋져도 다시 수정해야 합니다.
그래서 이번 테스트에서는 단순히 “어느 AI가 더 예쁜 그림을 만드는가?”가 아니라 “여러 조건을 동시에 제시했을 때 얼마나 정확하게 지시사항을 따르는가?”를 중심으로 비교했습니다.
테스트 방법
두 AI에게 다음과 같은 조건을 제시했습니다.
- 화면에는 사람이 정확히 3명 있어야 한다.
- 왼쪽에는 안경을 쓴 남자 직원이 앉아 있어야 한다.
- 가운데에는 빨간색 셔츠를 입은 여자 직원이 서 있어야 한다.
- 오른쪽에는 파란색 넥타이를 한 남자 상사가 서 있어야 한다.
- 책상 위에는 노트북 1대, 빨간 사과 2개, 파란색 머그컵 1개만 있어야 한다.
- 노트북 화면에는 “3:30 PM”이라고 표시되어야 한다.
- 벽에는 “MEETING 4 PM”이라고 적힌 흰색 메모지가 있어야 한다.
- 창밖에는 비가 내리고 있어야 한다.
- 여자 직원은 오른손으로 노란색 서류철을 들고 있어야 한다.
- 남자 상사는 왼손으로 손목시계를 가리키고 있어야 한다.
단순한 그림 요청과 달리 이번에는 인원수, 위치, 색상, 물건 개수, 문자, 시간, 날씨, 왼손·오른손까지 섞어봤습니다.
과연 두 AI는 몇 가지나 정확하게 지킬까요?
ChatGPT 결과
이번에는 예상하지 못했던 일이 하나 있었습니다.
ChatGPT가 한 장이 아니라 두 가지 이미지를 만들어 어느 이미지가 더 마음에 드는지 선택하도록 했습니다.
하지만 잘 나온 이미지를 골라 평가하면 공정하지 않기 때문에 이번 비교에서는 첫 번째 이미지를 기준으로 채점했습니다.
첫인상은 상당히 좋았습니다.
사람 3명의 위치와 복장뿐 아니라 사과의 개수, 머그컵 색상, 노트북의 시간까지 대부분 정확하게 표현했습니다.
특히 이미지 속에 글자를 넣는 조건이 있었는데,
3:30 PM
그리고
MEETING 4 PM
두 문구도 제대로 표현했습니다.
Gemini 결과
Gemini는 이번에는 별도의 선택지를 제시하지 않고 한 장의 이미지를 바로 생성했습니다.
전체적인 구도는 ChatGPT와 상당히 비슷했습니다.
왼쪽의 남자 직원, 가운데 여자 직원, 오른쪽 상사라는 배치부터 빨간 셔츠와 파란 넥타이까지 주요 조건은 대부분 정확하게 반영했습니다.
3:30 PM과 MEETING 4 PM이라는 글자도 잘 표현했습니다.
다만 조건을 아주 엄격하게 적용하면 한 가지 차이가 눈에 들어왔습니다.
책상 위에는 지정한 물건들만 있어야 한다고 요청했는데 Gemini 이미지에는 작은 화분 등 추가적인 물체가 보입니다.
일반적인 이미지 생성이라면 전혀 문제가 되지 않겠지만 이번 실험의 목적은 지시사항 준수 여부이기 때문에 엄격하게 평가했습니다.
조건별로 직접 채점해봤습니다
| 테스트 조건 | ChatGPT | Gemini |
|---|---|---|
| 사람 정확히 3명 | O | O |
| 왼쪽 안경 쓴 남자 | O | O |
| 가운데 빨간 셔츠 여자 | O | O |
| 오른쪽 파란 넥타이 상사 | O | O |
| 지정한 책상 물건만 표현 | O | △ |
노트북 3:30 PM | O | O |
MEETING 4 PM 메모 | O | O |
| 창밖에 비 | O | O |
| 여자가 오른손으로 노란 서류철 | O | O |
| 상사가 왼손으로 손목시계를 가리킴 | X | X |
엄격하게 1점씩 계산하면 제 판단으로는
ChatGPT : 9/10
Gemini : 8~9/10
정도였습니다.
Gemini의 책상 위 물체 조건을 얼마나 엄격하게 판단하느냐에 따라 점수가 달라질 수 있기 때문에 8~9점으로 봤습니다.
이번 테스트에서 확인한 차이
두 AI 모두 예상보다 높은 정확도를 보여줬습니다.
사람 수, 인물의 위치, 옷 색상, 사과와 머그컵의 개수, 노트북에 표시되는 시간, 벽에 적힌 문구처럼 비교적 명확한 조건은 상당히 잘 반영했습니다.
특히 이미지 속에 “3:30 PM”, “MEETING 4 PM”처럼 정확한 글자를 넣는 조건까지 제대로 표현한 점은 인상적이었습니다.
반면 조건이 단순한 물체나 색상을 넘어 신체 방향이나 공간 관계로 바뀌자 두 AI 모두 실수를 보였습니다.
이번 테스트에서 가장 어려웠던 조건은 바로 왼손으로 손목시계를 가리키는 행동이었습니다.
이 결과만 놓고 보면 AI 이미지 생성에서는 단순한 사물의 종류와 개수를 지정하는 것보다 왼쪽·오른쪽, 어느 손으로 무엇을 하는지와 같은 공간적 관계를 정확하게 전달하는 것이 더 어렵다는 점을 확인할 수 있었습니다.
그런데 두 AI가 똑같이 틀린 조건이 있었다
이번 테스트에서 가장 흥미로웠던 부분입니다.
10번째 조건은
“남자 상사는 왼손으로 손목시계를 가리키고 있어야 합니다.”
였습니다.
그런데 결과를 자세히 보면 두 AI 모두 비슷한 행동을 표현했습니다.
손목에 시계를 차고 반대쪽 손가락으로 시계를 가리키는 모습입니다.
사람이 실제로 시계를 확인하는 자연스러운 모습이기는 합니다.
하지만 우리가 요청한 조건을 문자 그대로 적용하면 왼손으로 가리켜야 했습니다.
즉, ChatGPT와 Gemini 모두 그림 자체는 자연스럽게 만들었지만 세밀한 왼손·오른손 관계에서는 지시를 정확하게 따르지 못했습니다.
다만 이 부분은 테스트 문장 자체도 조금 더 명확하게 만들 수 있었겠다는 생각이 들었습니다.
예를 들어 다음 테스트에서는
“오른쪽 손목에 시계를 착용하고 왼손 검지로 그 시계를 가리킨다.”
처럼 손목과 손가락을 각각 지정하면 AI가 공간 관계를 얼마나 정확하게 이해하는지 더욱 확실하게 확인할 수 있을 것 같습니다.
AI 이미지 프롬프트를 작성할 때 얻은 팁
이번 결과를 바탕으로 다음에 시도해볼 프롬프트 개선안을 생각해봤습니다. 개선안의 효과를 별도로 비교 실험한 것은 아닙니다.
여러 조건을 한 문장에 길게 넣기보다는 사람, 위치, 물건, 행동을 각각 구체적으로 구분해서 작성하는 것이 좋습니다.
예를 들어,
“남자 상사가 왼손으로 손목시계를 가리킨다.”
라고만 요청하는 것보다,
“남자 상사의 오른쪽 손목에 손목시계가 있다. 남자 상사는 왼손 검지로 오른쪽 손목의 시계를 가리킨다.”
처럼 각각의 위치와 행동을 구체적으로 지정하는 방식입니다.
특히 AI 이미지를 만들 때는 왼쪽·오른쪽, 앞·뒤, 손가락 방향, 물체와 사람의 위치 관계처럼 혼동하기 쉬운 조건을 더 명확하게 작성하는 것이 도움이 될 수 있습니다.
또 하나 재미있었던 차이
이전 이미지 생성 비교에서는 Gemini가 여러 결과를 보여주며 선택하게 하는 경우가 있었습니다.
그런데 이번에는 반대였습니다.
ChatGPT는 두 개의 이미지를 제시했고 Gemini는 하나의 이미지만 생성했습니다.
같은 AI라도 프롬프트와 상황에 따라 결과를 제시하는 방식이 달라질 수 있다는 점도 흥미로웠습니다.
직접 비교해본 결론
이번 테스트에서는 ChatGPT의 확실한 충족 항목이 하나 더 많았지만, 점수 범위는 겹쳤습니다.
제가 직접 조건별로 확인했을 때 ChatGPT는 약 9/10, Gemini는 약 8~9/10 수준이었습니다.
다만 이 결과만으로 어느 AI가 항상 더 정확하다고 단정하기는 어렵습니다. AI 이미지 생성 결과는 같은 프롬프트를 사용해도 매번 달라질 수 있고, 모델이나 서비스의 업데이트에 따라서도 결과가 달라질 수 있기 때문입니다.
이번 테스트에서 더 흥미로웠던 것은 두 AI 모두 비슷한 부분에서 실수했다는 점입니다.
사람의 수, 옷 색상, 물건 개수, 시간, 영문 문구 같은 조건은 상당히 정확하게 처리했지만, 왼손과 오른손처럼 사람의 신체와 물체의 공간적 관계가 복잡해지자 오류가 나타났습니다.
그래서 이번 테스트를 한 문장으로 정리하면,
“둘 다 생각보다 정확했다. 하지만 조건이 세밀해질수록 차이와 한계가 나타나기 시작했다.”
정도가 가장 적절할 것 같습니다.
이번 결과는 한 번의 직접 테스트를 기준으로 한 것이므로 절대적인 성능 평가라기보다는 실제 사용 과정에서 확인한 비교 결과로 봐주시면 좋겠습니다.
다음에는 조건을 15개 또는 20개로 늘리고, 위치와 방향뿐 아니라 표정·행동·글자·물체 간 거리까지 함께 지정하면 어떤 결과가 나오는지도 직접 비교해볼 생각입니다.
FAQ
Q. ChatGPT와 Gemini 중 이미지 생성은 어느 쪽이 더 정확한가요?
이번 10가지 조건의 육안 판정에서는 ChatGPT의 O 항목이 하나 더 많았습니다. 다만 한 번의 테스트 결과이며 프롬프트와 생성 시점에 따라 결과는 달라질 수 있습니다.
Q. AI는 이미지 속 글자도 정확하게 만들 수 있나요?
이번 테스트에서는 3:30 PM과 MEETING 4 PM이라는 문구를 두 AI 모두 비교적 정확하게 표현했습니다. 다만 더 길거나 복잡한 문장은 오류가 발생할 가능성이 있습니다.
Q. AI 이미지에서 왼쪽과 오른쪽을 자주 틀리나요?
이번 테스트에서는 두 AI 모두 손목시계와 손의 방향 관계를 정확하게 표현하지 못했습니다. 따라서 좌우 관계가 중요한 이미지라면 손과 물체의 위치를 각각 구체적으로 지정해보는 것이 좋습니다.

댓글
댓글 쓰기