LLMLLM 基础

Transformer

Transformer

现代大模型的基础神经网络架构(2017 年提出),用自注意力机制并行处理整段序列。

Tokens
input
Embed
vectors
Attention
context
LLM
next token
tokens → vectors → attention → next token

llm · 图文示意

© 2026 Genisource Vibe · 知识点详情