LLMLarge Language Model · 대규모 언어 모델
엄청난 양의 글을 읽고 배워서 사람처럼 글을 읽고 쓰는 거대한 AI 모델이에요. ChatGPT·Claude·Gemini의 본체예요.
쉽게 말하면
세상의 책과 글을 엄청나게 많이 읽은 '이어 쓰기 천재'를 떠올려 보세요.
이 천재는 문장의 앞부분을 보면, 그다음에 올 가장 그럴듯한 말을 정말 잘 맞혀요.
그 맞히기를 한 조각씩 계속 이어 가면 질문에 대한 답, 이메일, 코드까지 써내요.
그림으로 정리하면
LLM이 만들어지는 길
- 엄청나게 읽기책·웹 글·코드로 사전학습 — 다음 말 맞히기 연습
- 말 잘 듣게 다듬기질문-답 예시로 지시 따르기 학습
- 사람 취향 맞추기사람이 고른 더 나은 답 쪽으로 강화학습(RLHF)
- 서비스로 쓰기ChatGPT·Claude 같은 앱 속에서 답해요
검색 엔진과 LLM은 일하는 방식이 달라요
검색 엔진
- 이미 있는 문서를 찾아 보여 줘요
- 출처가 바로 보여요
- 새 글을 쓰지는 않아요
LLM
- 배운 패턴으로 새 글을 써요
- 출처가 없을 수 있어요
- 요약·번역·초안을 잘해요
답은 한 조각씩 이어 써요
질문고양이를 한 줄로 소개해 줘
다음 조각'고양이는'
또 다음 조각'고양이는 조용한'
답 완성'…조용한 친구예요.'
실제로는
- '대규모(Large)'는 파라미터가 수십억~수천억 개 이상이라는 뜻이에요.
- 트랜스포머 구조로 만들고, 사전학습 → 지시 따르기 학습 → 사람 평가로 다듬기(RLHF) 순서로 길러요.
- 글만이 아니라 그림·소리까지 다루는 멀티모달 LLM도 많아요.
왜 알아야 하나요
LLM은 '아는 척을 잘하는 글쓰기 천재'예요. 초안·요약·번역은 잘하지만, 최신 정보나 정확한 숫자는 검색·RAG 같은 도구를 붙여야 믿을 수 있어요.
헷갈리기 쉬운 것
- 다음 말 맞히기로 답을 만들기 때문에, 모르는 것도 그럴듯하게 지어낼 수 있어요(환각).
- 학습이 끝난 뒤의 일은 모를 수 있어요(지식 컷오프).