ChatGPT가 엑셀 화면 캡처도 읽을까? 실제 인보이스 이미지로 테스트해봤습니다

실험 조건과 결과를 읽는 기준

대상은 인보이스 엑셀 화면을 캡처한 이미지입니다. 기본정보 추출·유상 항목 분리·금액 검산·수량 검산·없는 정보 확인을 순서대로 요청했습니다. 213 YDS 누락은 첫 답변에서 발생했고, 정답 수량과 차이를 알려준 뒤 누락 행을 찾았습니다. 따라서 추가 검증 성공을 최초 답변의 정확도로 계산하지 않습니다.

정확한 실행일·모델명·요금제·재시도 횟수는 이 글에 기록되어 있지 않습니다. 아래 별점은 작성자의 사용 만족도이며 정확도 측정값이 아닙니다. 수치와 답변은 당시 글에 기록한 관찰 결과입니다.

 요즘 ChatGPT를 사용하다 보면 문서나 사진을 첨부해서 질문하는 경우가 많습니다.

그런데 문득 이런 생각이 들었습니다.

“엑셀 파일을 직접 올리는 게 아니라, 엑셀 화면을 캡처한 사진만 올려도 표와 숫자를 제대로 읽을 수 있을까?”

특히 회사에서 사용하는 인보이스나 견적서처럼 숫자가 많은 자료도 제대로 분석할 수 있는지가 궁금했습니다.

그래서 이번에는 실제 업무에서 사용하는 Commercial Invoice 엑셀 화면을 이미지로 캡처한 뒤 ChatGPT에 올려 테스트해봤습니다.

단순히 글자를 읽는 것부터 시작해서 표 분석, 금액 검산, FOC 수량 계산, 이미지에 없는 정보 구분까지 단계별로 확인했습니다.

결과는 꽤 흥미로웠습니다.


테스트에 사용한 자료

이번 테스트에 사용한 자료는 Commercial Invoice 엑셀 화면 캡처 이미지입니다.

이미지에는 다음과 같은 정보가 들어 있습니다.

  • Invoice No.
  • Invoice Date
  • Payment
  • From / To
  • Fabric
  • HS Code
  • Color
  • Style #
  • Quantity
  • Unit Price
  • Amount
  • FOC Quantity
  • Total Quantity
  • Total Amount

즉, 단순한 문장이 아니라 작은 영문과 숫자, 여러 행과 열이 복잡하게 섞여 있는 실제 업무용 표입니다.

※ 블로그에 올리는 이미지는 거래처 및 회사 관련 정보 중 공개하기 곤란한 부분을 가렸습니다.



테스트 1|엑셀 캡처 이미지의 글자와 숫자를 읽을 수 있을까?

먼저 가장 기본적인 테스트부터 시작했습니다.

질문

첨부한 엑셀 화면 캡처 이미지를 읽고 다음 정보를 찾아줘.

  1. Invoice No.
  2. Date
  3. Payment
  4. From
  5. To
  6. Fabric
  7. HS Code
  8. Total Quantity
  9. Total Amount

이미지에서 실제로 확인되는 정보만 사용하고, 확인되지 않는 내용은 추측하지 마.

결과

ChatGPT는 요청한 9개 정보를 모두 읽어냈습니다.

Invoice No.와 날짜처럼 비교적 큰 글씨뿐 아니라 Fabric의 긴 영문 설명, HS Code, 그리고 표 하단에 있는 Total Quantity와 Total Amount까지 인식했습니다.

제가 원본과 하나씩 비교해봤는데 9개 항목 모두 정확했습니다.

테스트 1 결과

★★★★★ 5/5

엑셀 파일 자체를 올린 것이 아니라 엑셀 화면을 캡처한 이미지 한 장만 제공했는데도 주요 정보를 정확하게 읽었다는 점이 인상적이었습니다.


테스트 2|복잡한 표에서 원하는 항목만 골라낼 수 있을까?

이번에는 난도를 높였습니다.

인보이스에는 일반적인 유상 판매 수량과 FOC(Free of Charge, 무상 제공 수량)가 함께 표시되어 있었습니다.

그래서 단순히 표를 읽는 것이 아니라 FOC를 제외하고 유상 판매 항목만 골라낼 수 있는지 테스트했습니다.

질문

이 엑셀 화면 캡처 이미지에서 유상으로 판매된 항목만 찾아서
Color / Style # / Quantity(YDS) / Unit Price / Amount 순서로 표를 만들어줘.

FOC로 표시된 수량은 제외해줘.
같은 Color라도 Style #이 다르면 각각 별도 항목으로 구분해줘.
이미지에서 확인되는 정보만 사용하고, 확인되지 않는 내용은 추측하지 마.

ChatGPT는 Color, Style #, Quantity, Unit Price, Amount를 표로 만들어줬습니다.

처음 봤을 때는 상당히 정확해 보였습니다.

그런데 나중에 전체 수량을 검산하는 과정에서 한 가지 문제가 발견됐습니다.

ChatGPT는 유상 판매 항목이 14개라고 했지만, 실제로는 15개였습니다.

누락된 항목은

Dark Chestnut Brown / AE1932668 / 213.0 YDS

였습니다.

즉, 복잡한 표를 상당히 잘 읽기는 했지만 한 행을 놓쳤습니다.

테스트 2 결과

★★★★☆ 4/5

처음에는 완벽하다고 생각했지만 후속 검산에서 누락이 발견됐습니다.

이것만 봐도 AI가 만들어준 표가 그럴듯해 보여도 원본과 한 번 비교할 필요가 있다는 것을 알 수 있었습니다.


테스트 3|인보이스의 금액을 직접 검산할 수 있을까?

이번에는 숫자 계산 능력을 테스트했습니다.

유상 판매 항목에 표시된 Amount를 모두 더한 뒤, 이미지 하단의 Total Amount와 일치하는지 확인하도록 했습니다.

질문

이 이미지에서 유상 판매된 항목의 Amount를 모두 더해서 총금액을 계산해줘.

각 Amount를 어떻게 더했는지 계산 과정도 보여주고, 계산된 금액이 이미지 하단에 표시된 TOTAL Amount와 일치하는지도 확인해줘.

이미지에 표시된 숫자만 사용하고 임의로 수정하거나 추가하지 마.

여기서 예상하지 못한 결과가 나왔습니다.

ChatGPT가 이미지에 표시된 개별 Amount를 합산한 결과는

USD 21,797.66

이었습니다.

그런데 인보이스 하단의 Total Amount는

USD 21,797.68

이었습니다.

정확히 USD 0.02 차이가 발생했습니다.

처음에는 ChatGPT가 계산을 잘못한 것 아닐까 생각했습니다.

그래서 한 단계 더 확인했습니다.


0.02달러 차이는 왜 발생했을까?

ChatGPT에게 각 항목의

Quantity × Unit Price(USD 1.58)

를 직접 다시 계산하도록 했습니다.

결과를 확인해보니 개별 Amount가 잘못된 항목은 없었습니다.

예를 들어,

1,221.9 YDS × USD 1.58 = USD 1,930.602

입니다.

이를 센트 단위로 표시하면 USD 1,930.60이 됩니다.

다른 항목들도 같은 방식으로 확인했습니다.

그렇다면 왜 0.02달러 차이가 발생했을까요?

본문에 기록한 분석에서는 반올림 시점의 차이로 설명했습니다.

각 항목을 먼저 센트 단위로 반올림한 뒤 합산하면:

USD 21,797.66

반면 각 항목의 반올림 전 계산값을 그대로 합산하면:

USD 21,797.68

이 됩니다.

즉, 특정 항목의 계산 오류가 아니라 각 행을 먼저 반올림하느냐, 전체를 계산한 뒤 반올림하느냐에 따라 발생한 차이였습니다.

테스트 3 결과

★★★★★ 5/5

이 부분은 이번 테스트에서 특히 인상적이었습니다.

단순히 이미지의 숫자를 읽는 것을 넘어 개별 금액을 다시 계산하고 Total과 비교한 뒤 0.02달러 차이가 발생한 이유까지 분석했습니다.

실제 업무에서도 견적서나 인보이스의 금액을 검산할 때 활용할 수 있겠다는 생각이 들었습니다.


테스트 4|유상 수량과 FOC 수량을 정확하게 계산할까?

이번에는 조금 더 복잡한 계산을 요청했습니다.

질문

이 이미지에서 유상 수량과 FOC 수량을 각각 합산해줘.

그리고 유상 수량 + FOC 수량 = 이미지 하단의 TOTAL Quantity와 일치하는지 확인해줘.

마지막으로 전체 수량에서 FOC 수량이 차지하는 비율도 계산해줘.

이미지에 표시된 수치만 사용하고 계산 과정을 보여줘.

ChatGPT의 첫 번째 계산 결과는 다음과 같았습니다.



유상 수량: 13,583.0 YDS

FOC 수량: 331.1 YDS

따라서,

13,583.0 + 331.1 = 13,914.1 YDS

라고 계산했습니다.

그런데 이미지 하단의 Total Quantity는 14,127.1 YDS였습니다.

무려 213.0 YDS 차이가 발생했습니다.

ChatGPT도 이 차이를 발견했지만, 이미지에서 이유를 확인할 수 없다고 답했습니다.

여기서 저는 원본 엑셀을 직접 확인했습니다.


ChatGPT가 실제로 한 행을 놓쳤다

원본 엑셀의 정확한 유상 수량은

13,796.0 YDS

였습니다.

FOC 수량은 ChatGPT가 계산한 것과 동일한

331.1 YDS

였습니다.

따라서 실제 계산은

13,796.0 + 331.1 = 14,127.1 YDS

가 됩니다.

원본 엑셀의 Total Quantity와 정확하게 일치합니다.

그렇다면 ChatGPT는 어디에서 실수한 걸까요?

ChatGPT가 계산한 유상 수량과 실제 유상 수량의 차이를 계산하면,

13,796.0 - 13,583.0 = 213.0 YDS

였습니다.

정확히 한 항목이 빠졌다는 것을 알 수 있었습니다.

테스트 4 결과

★★★☆☆ 3/5

이번 테스트에서는 명확한 오류가 발견됐습니다.

숫자가 많고 유상과 FOC 행이 섞여 있는 복잡한 표에서는 일부 데이터를 놓칠 수도 있다는 것을 확인했습니다.


추가 테스트|틀렸다고 알려주면 스스로 오류를 찾을까?

여기서 끝내지 않고 한 번 더 질문했습니다.

ChatGPT에게 실제 원본의 유상 수량이 13,796.0 YDS이며, ChatGPT의 계산과 213.0 YDS 차이가 난다고 알려줬습니다.

그리고 누락한 항목을 다시 찾아달라고 했습니다.



질문

실제 원본 엑셀에서 확인한 유상 수량은 13,796.0 YDS입니다.

네가 계산한 13,583.0 YDS와 정확히 213.0 YDS 차이가 납니다.

첨부 이미지를 다시 확인해서 누락한 213.0 YDS가 어느 Color / Style #에 해당하는지 찾아줘.

찾을 수 없다면 추측하지 말고 찾을 수 없다고 답해줘.

이번에는 ChatGPT가 누락된 항목을 찾아냈습니다.

Dark Chestnut Brown (18-1048TCX)
Style #: AE1932668
Quantity: 213.0 YDS

다시 계산하면,

13,583.0 + 213.0 = 13,796.0 YDS

그리고 FOC를 더하면,

13,796.0 + 331.1 = 14,127.1 YDS

원본 Total Quantity와 정확하게 일치했습니다.

추가 검증 결과

★★★★★ 5/5

처음부터 정확하게 읽었으면 가장 좋았겠지만, 오류와 차이를 알려주자 이미지를 다시 확인해 자신이 놓친 행을 찾아냈다는 점도 흥미로웠습니다.


테스트 5|이미지에 없는 정보도 만들어낼까?

마지막으로 AI의 환각(Hallucination) 여부도 테스트했습니다.

일부러 이미지에 없는 정보를 질문했습니다.

질문

이 인보이스 이미지를 기준으로 실제 선적일, 선박명(Vessel Name), B/L No., 실제 입금일을 알려줘.

이미지에서 확인할 수 없는 정보는 추측하지 말고 ‘확인할 수 없음’이라고 표시해줘.

ChatGPT의 답변은 네 가지 모두:

확인할 수 없음

이었습니다.

특히 중요한 부분이 있었습니다.

이미지에는 Invoice Date: MAY 30, 2025가 있었지만, ChatGPT는 이를 Actual Shipment Date로 해석하지 않았습니다.

또한 Payment: T/T라는 정보도 있었지만, T/T는 결제방식을 의미할 뿐 실제 입금일을 의미하지 않는다고 구분했습니다.

선박명과 B/L No. 역시 임의로 만들어내지 않았습니다.

테스트 5 결과

★★★★★ 5/5

적어도 이번 테스트에서는 이미지에 없는 정보를 그럴듯하게 만들어내지 않았습니다.


전체 테스트 결과

이번 테스트 결과를 정리하면 다음과 같습니다.

테스트내용결과
테스트 1기본정보 9개 읽기★★★★★
테스트 2유상 판매 항목 추출★★★★☆
테스트 3Amount 합계 및 반올림 차이 분석★★★★★
테스트 4유상·FOC 수량 계산★★★☆☆
추가 검증누락된 213 YDS 재탐색★★★★★
테스트 5이미지에 없는 정보 구분★★★★★

직접 사용해본 결론

이번 테스트를 하기 전에는 엑셀 화면을 캡처한 이미지에서 작은 숫자와 복잡한 표를 얼마나 정확하게 읽을 수 있을지 의문이었습니다.

결과적으로는 생각보다 상당히 잘 읽었습니다.

Invoice No., 날짜, Fabric, HS Code, Total Quantity, Total Amount 같은 기본 정보는 정확하게 읽었습니다.

또한 표에서 유상 판매와 FOC를 구분하고 금액을 계산하거나, 인보이스의 Total과 개별 Amount의 차이를 찾아내는 것도 가능했습니다.

특히 0.02달러 차이의 원인이 반올림 시점에 있다는 것을 찾아낸 부분은 실제 업무에서도 활용 가능성이 있어 보였습니다.

하지만 중요한 한계도 발견했습니다.

ChatGPT가 15개의 유상 판매 항목 중 한 행을 놓쳤습니다.

213.0 YDS가 누락되면서 전체 수량이 맞지 않았습니다.

겉으로 보기에는 매우 그럴듯한 표였기 때문에 후속 계산을 하지 않았다면 누락 사실을 발견하지 못했을 수도 있습니다.


업무에서 사용할 때는 이렇게 하는 게 좋겠다

이번 테스트를 통해 제가 가장 중요하다고 느낀 부분입니다.

ChatGPT에게 업무용 표나 인보이스 이미지를 분석시킬 때는 단순히

“이 표를 정리해줘.”

라고 끝내기보다,

“개별 수량의 합계와 TOTAL이 일치하는지도 확인해줘.”

“계산이 맞지 않으면 차이가 얼마인지 알려줘.”

“이미지에서 확인할 수 없는 정보는 추측하지 마.”

같은 조건을 함께 주는 것이 좋겠습니다.

특히 TOTAL을 이용한 검산이 중요합니다.

이번 테스트에서도 유상 판매 항목 하나가 빠졌지만, Total Quantity와 비교했기 때문에 213 YDS가 누락됐다는 사실을 발견할 수 있었습니다.


ChatGPT에게 이미지 분석을 시킬 때 추천하는 문장

저라면 앞으로 중요한 업무자료를 분석할 때 질문 마지막에 다음 문장을 붙일 것 같습니다.

이미지에서 실제로 확인되는 정보만 사용하고, 확인되지 않는 내용은 추측하지 마. 계산이 필요한 경우 계산 과정을 보여주고, 이미지에 표시된 TOTAL과도 비교해서 일치 여부를 확인해줘.

이렇게 질문하면 단순히 답을 받는 것보다 AI가 읽은 데이터가 맞는지 한 번 더 검증하는 효과를 얻을 수 있습니다.


최종 평가

이번 테스트의 결론은 명확했습니다.

ChatGPT는 엑셀 화면을 캡처한 이미지도 상당히 잘 읽습니다.

단순 문자 인식뿐 아니라 표의 구조를 이해하고, 특정 데이터만 골라내거나 계산하고, 서로 다른 숫자를 비교하는 것도 가능했습니다.

하지만 100% 정확하지는 않았습니다.

특히 숫자와 행이 많은 복잡한 표에서는 일부 항목을 놓칠 가능성이 있다는 것을 실제로 확인했습니다.

따라서 업무에서는 ChatGPT를 최종 확인자가 아니라 빠른 1차 분석 및 검산 도구로 활용하는 것이 좋겠다는 결론입니다.

이번 테스트를 한 문장으로 정리하면,

“엑셀 캡처도 놀랄 만큼 잘 읽었지만, 213 YDS 한 줄을 놓쳤다. 그래서 중요한 숫자는 반드시 TOTAL과 다시 비교해야 한다.”

이 정도가 가장 정확한 평가일 것 같습니다.

검산할 때 구분할 점

이 글의 유상 수량 13,796.0 YDS에 단가 1.58달러를 곱하면 21,797.68달러입니다. 다만 행별 합계 21,797.66달러와의 차이가 실제 엑셀 수식에서 어떻게 생겼는지는 원본 셀 값과 수식으로 확인해야 합니다. 표시된 소수점 자릿수만으로 반올림·절사 방식을 단정하지 마세요.

댓글

이 블로그의 인기 게시물

컴퓨터 소리가 안 날 때 해결방법|윈도우 PC 스피커·이어폰 소리 안 남 총정리

크롬 다운로드 위치 확인·변경|파일마다 저장 위치 묻기

휴대폰 사진 컴퓨터로 옮기는 방법|갤럭시·아이폰 PC 전송 총정리