Stanford CME 295 Transformers & LLMs | Fall 2026 | Lecture 3 - LLM training
Stanford Online · 104:31 · Watch on YouTube
Stanford CME 295 강의 3 (트랜스크립트에서는 "CME 225"라고 부름)은 디코더 전용 트랜스포머가 일련의 학습 단계를 통해 유용한 어시스턴트가 되는 방법을 다룹니다. 먼저 사전 학습, 중기 학습, 장문맥 학습이 언어와 지식을 습득합니다. 그 다음 지도 학습 미세 조정(SFT)은 명령어를 따르는 방법을 가르치고, 선호도 정렬(RLHF/DPO)은 톤과 행동을 형성하며, 검증...