chapter★★★★★난이도 · 약 60분

LLM 작동 원리

토큰화 → 임베딩 → Self-Attention → Transformer → 출력. LLM의 5단계 파이프라인.

#LLM#Transformer#파이프라인#핵심

왜 배우는가

AI 시대의 핵심 기술을 이해하는 출발점. ChatGPT가 한 마디를 만들어내기까지 내부에서 벌어지는 5단계 과정을 파악하면, 이후 배울 모든 AI 개념의 맥락이 잡힌다.

Topics · 03

레슨 단위로 펼쳐 보기

TOPIC · 01 · 01★★
LLM 5단계 파이프라인
입력 → 토큰화 → 임베딩 → Transformer → 출력. "다음에 올 단어를 예측하는 기계".
15min·2drillsREAD →
TOPIC · 01 · 02★★
임베딩과 Self-Attention
단어를 벡터 공간에 배치하고, 단어 간 관계를 Q·K·V로 계산하는 핵심 메커니즘.
20min·1drillsREAD →
TOPIC · 01 · 03
추론 최적화와 학습
Autoregressive 생성, KV Cache, Temperature, RLHF, MoE, RAG — LLM의 실전 기술.
25min·3drillsREAD →