
279
5
장
모델 능력 확장
\[
84 , \text{제곱미터} \times 0.3025 , \text{평/제곱미터} \approx 25.41 , \text{평}
\]
그러므로 84제곱미터 아파트는 약 26.14평입니다.
다시 말하지만, 챗
GPT
가 훈련 과정에서
84
라는 수치가 있는 딱 이런 아파트 평수 변환 문제
를 접했을 가능성은 낮다. 접해본 유사한 문제들로부터 올바른 접근법을 일반화하는 능력 덕분
에 이런 답을 내놓았을 것이다.
그런데 실제 곱셈 결과는
25
.
41
이므로, 위 곱셈 결과는 환각이다. 이 문제를 해결하려면 모델
이 계산기 도구에 접근할 수 있게 해야 한다 (제
7
장의 패턴
21
도구 호출
참조 ).
5.1.2
모르는 능력들
앞의 두 예가
LLM
의 추론 능력을 증명하지는 못한다. 적어도, 인간이 그런 문제를 푸는 것과
동일한 방식으로
LLM
이 추론한다는 증거는 되지 않는다.
2025
년
4
월 기준으로
LLM
훈련에서
잘 다루지 않았던 간단한 추론 문제를 살펴보자. 이는 브리지
bridge
나 휘스트
whist
, 스페이드
spades
,
하트
hearts
같은 트릭테이킹
trick
-
taking
카드 게임
1
의 수트 플레이
suit
play
와 관련된 문제이다.
우리는 챗
GPT
에 이렇게 물었다.
브리지 게임에서 "eight ever, nine never"(8장은 ...