AI 百科

Knowledge Distillation

知识蒸馏是一种模型压缩技术，通过让一个小模型（学生）学习大模型（教师）的输出，把大模型的能力迁移到小模型上，实现更低成本、更快速的推理。

Kimi AI

Kimi 是月之暗面推出的智能助手，以超长上下文（百万级 token）著称，可一次处理超长文档，主打"长文本领域专家"。

KV Cache (Key-Value Cache)

KV Cache 是 Transformer 推理中的键值缓存机制：把已计算的注意力键值存起来供后续词元复用，避免重复计算，是提升大模型生成速度与吞吐的核心优化。

Knowledge Distillation

模型蒸馏是把大模型（教师）学到的能力压缩到更小模型（学生）的技术，让小模型在更低的算力成本下接近大模型的水平。

Knowledge Graph

知识图谱以「实体-关系」三元组组织知识，是结构化语义网络，支撑搜索增强、问答、推荐与推理，也是 GraphRAG 与行业智能系统的基石。