AI 챗봇은 어떻게 다음 말을 이어 갈까?

요점부터 볼까요?

구글의 머신러닝 교육 자료는 대규모 언어 모델(LLM)을 앞에 나온 토큰을 바탕으로 다음 토큰을 예측하는 모델이라고 설명해요. 토큰은 단어 전체일 수도, 단어의 일부일 수도 있습니다. 엄청난 양의 글을 학습해 “이 다음에는 무엇이 올 법한가”를 잘 맞히도록 만들어진 거예요.

그래서 AI의 답은 “사실을 찾아온 결과”라기보다 “그럴듯하게 이어 쓴 결과”에 가까울 때가 있어요. 문장이 자연스러워도 내용이 틀릴 수 있는 이유입니다.

우리 생활로 바꿔보면

“오늘 날씨가 정말”이라는 말 뒤에는 “좋다”, “덥다” 같은 말이 올 확률이 높겠죠. AI는 이런 예측을 아주 길게, 아주 빠르게 반복하며 답을 만듭니다. 중요한 숫자나 날짜는 AI 답만 믿지 말고 원래 자료에서 확인해 보세요.

이 부분은 함께 기억해요

• 실제 AI 서비스는 검색 결과나 도구를 함께 쓰기도 해서 작동 방식이 더 복잡해요.
• 자연스러운 문장과 정확한 내용은 별개예요.
• 민감한 개인정보는 입력하지 않는 게 좋아요.