Jun 14, 2026 ai-systems LLMの基本原理入門: トークン化から文脈長まで LLMを、トークン化、埋め込み、Transformer、事前学習、次トークン予測、推論、文脈長の順に分解し、非専門家にも分かる形で整理する。