🤖 AI가 '수학 천재'인 줄 알았는데... '이 숫자' 앞에서는 0점?!

분류: 정보 · 2026-02-12

안녕하세요. Quniv 커뮤니티 여러분!

오늘도 흥미로운 최신 테크 소식을 들고 온 Quniv입니다! 👋

요즘 챗GPT나 클로드 같은 AI들, 정말 똑똑하죠?

(GPT-5.3-CODEX나, Opus 4.6이 정말 강력하긴 하더라구요!!)

코딩도 척척 해내고 어려운 논문도 순식간에 요약해 주는 걸 보면 "와, 진짜 천재다!"라는 말이 절로 나오는데요.

그런데 이 완벽해 보이는 AI에게도 아주 치명적인 '약점' 이 있다는 사실, 알고 계셨나요? 😲

놀랍게도 수학적으로 똑같은 숫자인데 '모양'만 살짝 바꿔도 AI가 바보가 되어버린다고 합니다.

도대체 무슨 일인지, 그리고 우리가 이 AI를 어떻게 도와줄 수 있는지!

누구나 이해하기 쉽게 4가지 포인트로 정리해 드릴게요.

1. AI는 '숫자 편식'쟁이? (충격적인 스크립트 세금 💸)

여러분, '1,729' 라는 숫자를 아시죠? AI에게 이 숫자로 계산을 시키면 아주 잘합니다.

그런데 이 숫자를 인도의 데바나가리 숫자 표기인  '१७२९' 로 바꿔서 입력하면 어떻게 될까요?

뜻은 100% 똑같은데 말이죠.

결과는... 정답률이 와르르 무너집니다! 📉

연구 결과에 따르면, 우리가 쓰는 아라비아 숫자가 아닌 다른 언어의 숫자(중국어, 벵골어 등)를 쓰면 AI의 성능이 무려  66%에서 87%까지 떨어졌다고 해요.

연구자들은 이걸 '스크립트 세금(Script Tax)' 이라고 부릅니다.

AI가 수학 원리를 진짜로 이해해서 푸는 게 아니라, 학습할 때 많이 본 "익숙한 숫자 모양"에만 반응한다는 증거죠.

겉모습만 보고 차별하다니, AI 너 실망이야! 😤

2. 점(.) 하나 찍었을 뿐인데... "저게 뭐죠?" 🤔

숫자뿐만이 아닙니다.

나라마다 숫자를 표기하는 방식(마침표와 쉼표)이 다르다는 거 아시나요?

미국식 (F1): 922,436.38 (쉼표로 자릿수 구분, 마침표로 소수점) 👉 AI: "완벽해! 이해했어!" 👌

유럽식 (F2): 922.436,38 (반대로 사용) 👉 AI: "으잉? 이거 IP 주소인가?" 😵‍💫

유럽식으로 표기하면 AI가 이걸 숫자가 아니라 인터넷 주소나 이상한 코드로 착각해서 성능이 급락한다고 해요.

심지어 인도처럼 쉼표를 독특하게 찍는 방식(3-2-2 자리 구분)을 쓰면 AI는 더더욱 혼란에 빠집니다.

우리가 보기엔 사소한 차이 같지만, AI에게는 엄청난 '멘붕'을 주는 셈이죠.

3. AI가 숫자를 읽는 독특한 방법 (토큰화의 비밀 🧩)

그럼 AI는 왜 이렇게 숫자에 약할까요? 그 비밀은 바로 '토큰화(Tokenization)' 에 있습니다.

쉽게 말해 AI가 글자를 읽을 때 쪼개는 단위인데요.

어떤 AI 모델(Gemini 1.5 Pro 등)은 숫자를 아주 잘게 쪼개서 읽습니다.

마치 "100"을 "백"으로 읽는 게 아니라 "일, 영, 영"으로 따로따로 읽는 것과 비슷해요.

이렇게 너무 잘게 쪼개지면 계산할 때 전체 맥락을 놓치기 쉽습니다.

반면, 덩어리로 묶어서 처리하는 모델(GPT-4o 등)은 그나마 실수가 적다고 하네요.

역시 공부도 요령이 있어야 하나 봅니다! 📚

4. AI를 똑똑하게 만드는 '꿀팁' 3가지 (치트키 대방출 🗝️)

그렇다면 우리는 익숙한 숫자만 써야 할까요?

NO! 연구진이 AI의 편견을 극복할 수 있는  프롬프트 전략 들도 발견했습니다.

예시 보여주기 (Few-shot): "이 숫자는 이렇게 계산하는 거야"라고 예제를 몇 개만 먼저 보여주면 정답률이 20~60%나 쑥 올라갑니다! 📈

번역표 주기 (Mapping): "〇은 0이고, 一은 1이야"처럼 친절하게 매핑 테이블을 주면 효과 만점! 이게 가장 효과가 좋았대요. ✨

현지어로 말걸기 (Native): 태국 숫자를 쓸 거면 질문도 태국어로! 언어를 통일해주면 AI가 덜 헷갈려 합니다.

🌟 요약: 진정한 '글로벌 AI'를 향하여

오늘 내용을 한 줄로 요약하면 이렇습니다.

"지금의 AI는 서구권 숫자 표기에만 익숙한 '편식쟁이'지만, 우리가 똑똑하게 질문하면 고칠 수 있다!"

AI가 단순히 번역만 잘하는 게 아니라, 전 세계의 다양한 숫자와 문화를 골고루 이해하는 '진정한 지능'이 되려면 아직 갈 길이 조금 남은 것 같네요.

하지만 이런 약점을 알았으니, 우리는 더 스마트하게 AI를 다룰 수 있겠죠? 😎

오늘의 Quniv 이야기, 어떠셨나요? AI의 의외의 허당미(?)가 느껴지셨나요? 다음에도 더 재미있고 유익한 기술 이야기로 찾아오겠습니다! 👋

💡 여러분이 AI를 쓰면서 겪었던 황당한 실수나 재미있는 에피소드가 있다면 댓글로 남겨주세요! (함께 웃어봐요! 🤣)

[출처 원문] The Effect of Scripts and Formats on LLM Numeracy (arXiv:2601.15251)