LLM 技术报告 大语言模型（LLM） 技术作为人工智能领域的一项重要创 新在今年引起了广泛的关注。 LLM 是利用深度学习和大数据训练的人工智能系统，专门 设计来理解、生成和回应自然语言。这些模型通过分析大量 的文本数据来学习语言的结构和用法，从而能够执行各种语 言相关任务。以 GPT 系列为代表，LLM 以其在自然语言 处理领域的卓越表现，成为推动语言理解、生成和应用的引 擎。 LLM LLM 在多个领域都取得了令人瞩目的成就。在自然语言处 理领域，GPT 系列模型在文本生成、问答系统和对话生成 等任务中展现出色的性能。在知识图谱构建、智能助手开发 等方面，LLM 技术也发挥了关键作用。此外，它还在代码 生成、文本摘要、翻译等任务中展现了强大的通用性。 本报告从技术人视角出发，将深入探讨 LLM 技术的背景、 基础设施、应用现状，以及相关的工具和平台。 2 / 32 LLM Tech Tech Map  向量数据库  数据库向量支持  大模型框架、微调 (Fine Tuning)  大模型训练平台与工具 基础设施 LLM Agent  备案上线的中国大模型  知名大模型  知名大模型应用 大模型 算力 工具和平台  LLMOps  大模型聚合平台  开发工具 AI 编程  插件、IDE、终端  代码生成工具 编程语言 3 / 32

i. ⼤模型⽅⾯。团队成员发明了RoPE相对位置编码，是Meta
LLaMa和Google
PALM等⼤多数 主流模型的重要组成部分；发明了group
normalization，是Stable
Diffusion等AI模型成功 的关键组件；发明了
Transformer-XL，是历史上第⼀个在词级别和字级别都全⾯超越RNN 的注意⼒语⾔模型，解决了语⾔建模上下⽂⻓度的关键问题，定义了语⾔建模的新标准；曾 机器）分 布式系统数量级性能优化的经验。
c. ⽬前团队⼈数超过
80
⼈，每个⽉都有在全球某个领域有显著影响⼒的⼈加⼊。
2.
团队聚焦底层技术创新，技术Vision强
a. 引领⼤模型的“⽆损⻓上下⽂”时代。2023年10⽉上旬，在产品
Kimi
智能助⼿中实现“⽆损 ⻓上下⽂窗⼝（Lossless
Long
Context
Window）”，⽀持
20
万汉字输⼊，实现对⻓⽂本的⽆ 和中⽂能⼒上
Kimi
智能助⼿依然领先。
b. 聚焦底层技术创新，不⾛技术捷径。最早提出“Lossless
Long
Context
可以解决
90%
以上的 模型定制问题”，坚持对数据的⽆损压缩，实现模型能⼒的提升，不⾛技术捷径（通过滑动窗 ⼝、降采样、⼩模型等技术实现上下⽂窗⼝延⻓，都是“技术捷径”）
c. 通过这篇⽂章，您可以了解更多技术⽅⾯信息：专访⽉之暗⾯杨植麟：lossless
long
context
is

materials 生成网表 符号和符号库 管理符号库 创建和编辑符号 浏览符号库 仿真器 值的表示 分配模型 SPICE 标识符 运行仿真 Helpful hints 高级主题 配置和定制 文本变量 数据库关联库文件 HTTP Libraries 自定义网表和 BOM 格式 操作参考 原理图编辑器 通用 91 91 91 93 98 105 105 如果你已经安装了标准的 KiCad 符号库并想使用它们，但第一个选项被禁用，请选择第二个选项并浏览到安装 KiCad 库的目录中的 sym-lib-table 文件。 如果你已经有一个你想使用的自定义符号库表，选择第二个选项并浏览你的 sym-lib-table 文件。 如果你想从头开始构建一个新的符号库表，选择第三个选项。 符号库管理将在待续中详细描述。 4 原理图编辑器的用户界面 PC 键盘上的按键布局。在苹果键盘布局中，使用 键来代替 ，使用 键来代替 。 许多操作默认没有分配快捷键，但可以使用快捷键编辑器（偏好设置 → 偏好设置… → 快捷键）分配或重新定义快捷 键。 NOTE 许多通过快捷键进行的操作也可以在上下文菜单中使用。要访问上下文菜单，在编辑画布上点击 右键。 根据所选择的内容或所使用的工具，将有不同的操作。 快捷键存储在 KiCad 的配置目录下的

. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 98 12.8.6 为多个单元和备用符号表示定义引脚 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 99 12.9 符号字段 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 112 Eeschema 简介 ix 15 创建自定义网表和 BOM 文件 114 15.1 中间网表文件格式 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 141 Eeschema 简介 x 16 仿真器 142 16.1 分配模型 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .

键取消。 如果已启动块移动命令，则可以使用右键单击弹出菜单选择另一个命令。 2.2. 热键 “Ctrl+F1” 键显示当前热键列表。 可以在 “原理图编辑器选项” 对话框的 “控件” 选项卡中重新定义热键（菜单 “首选项” → “常规选项”） 这是默认的热键列表： 帮助（此窗口） Ctrl+F1 放大 F1 缩小 F2 缩放重绘 F3 缩放中心 F4 适合屏幕 Home 缩放到选择 Alt+BkSp 删除节点 BkSp 突出显示连接 Ctrl+X 可以使用热键编辑器重新定义所有热键（菜单首选项 → 常规选项 → 《首选 项-控件，控件》）。 可以使用菜单 (首选项 → 导入和导出 → 导入/导出热键) 导入/导出热键设置。 2.3. 格点 在 Eeschema 中，光标始终在网格上移动。 网格可以自定义： 可以使用弹出菜单或使用 “首选项/选项” 菜单更改大小。 可以在 “原理图编辑器选项” 段与 50mil 网格对齐 自动扩展 放置符号字段的选项。如果选中，则使用 50mil 自动放置字段 网格，否则它们是自由放置的。 控制 重新定义热键并设置用户界面行为。 通过双击操作选择新的热键，或右键单击操作以显示弹出菜单： 编辑 为操作定义新的热键（与双击相同）。 撤消更改 还原操作的最近热键更改。 恢复默认值 将操作热键设置为其默认值。 撤消所有更改 还原操作的所有最近热键更改。

32层铜，14层技术层（丝印层，阻焊层，元件粘合剂层， 焊膏层和边缘切割层）以及4个辅助层（图纸和注释），并实时管理飞线指示 （飞线） 丢失的布线。 PCB元素（布线，焊盘，文本，图纸……）的显示可自定义： 完整或边框。 有无布线间隙。 对于复杂电路，可以选择性地隐藏层，区域和元件的显示以便在屏幕上清晰显 示。 可以高亮显示网的布线以提供高对比度。 封装可以旋转到任何角度，分辨率为0.1度。 项目特定 的封装库表只能在与项目板文件一起加载时进行编辑。 如果没有加载项目文 件或项目路径中没有封装库表文件，则会创建一个空表，可以对其进行编辑， 然后将其与板文件一起保存。 当在项目特定表中定义条目时，包含条目的“fp-lib-table 文件”将被写入当前打 开的 PCB 的文件夹中。 2.3.3. 初始配置 第一次运行 CvPcb 或 Pcbnew 并且在用户的主文件夹中找不到全局封装表文 昵称不 必以任何方式与实际库文件名或路径相关。 有效的库表条目有一些规则： 冒号“:”字符不能在昵称中的任何位置使用。 每个库条目必须具有有效的路径和/或文件名，具体取决于库的类型。 路径 可以定义为绝对，相对或环境变量替换（见下文） 必须选择适当的插件类型才能使库成为必需的。必须选择适当的插件类型 才能正确读取库。阅读。 还有一个描述字段用于添加库条目的描述。 选项字段包含特定于插件的特殊

. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 144 13.13.13D 模型路径 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 145 层铜，14 层技术层（丝印层，阻焊层，元件粘合剂层，焊膏层和边缘切割层）以及 4 个辅助 层（图纸和注释），并实时管理飞线指示（飞线）丢失的布线。 PCB 元素（布线，焊盘，文本，图纸⋯⋯）的显示可自定义： • 完整或边框。 • 有无布线间隙。 对于复杂电路，可以选择性地隐藏层，区域和元件的显示以便在屏幕上清晰显示。可以高亮显示网的布线以提供高对 比度。 Pcbnew 2 / 163 封装可以旋转到任何角度，分辨率为 。项目特定的封装库表只能在与项目板文件一起加载 时进行编辑。如果没有加载项目文件或项目路径中没有封装库表文件，则会创建一个空表，可以对其进行编辑，然后 将其与板文件一起保存。 当在项目特定表中定义条目时，包含条目的“fp-lib-table 文件”将被写入当前打开的 PCB 的文件夹中。 2.3.3 初始配置 第一次运行 CvPcb 或 Pcbnew 并且在用户的主文件夹中找不到全局封装

DeepSeek是什么？ AI + 国产 + 免费 + 开源 + 强大 • DeepSeek是一家专注通用人工智能（AGI）的中国科技公司，主攻大模型研发与应 用。 • DeepSeek-R1是其开源的推理模型，擅长处理复杂任务且可免费商用。 Deepseek可以做什么？ 直接面向用户或者支持开发者，提供智能对话、文本生成、语义理解、计算推理、代码生成补全等应用场景， 当人人都会用AI时，你如何用得更好更出彩？ 推理模型 • 例如：DeepSeek-R1，GPT-o3在逻辑推理、数学推理和实时问题解决方面表现突出。 推理大模型： 推理大模型是指能够在传统的大语言模型基础上，强化推理、逻辑分析和决策能力的模型。它 们通常具备额外的技术，比如强化学习、神经符号推理、元学习等，来增强其推理和问题解决能力。 非推理大模型： 适用于大多数任务，非推理大模型一般侧重于语言生成、上下文理解和自然语言处理，而不强 解和自然语言处理，而不强 调深度推理能力。此类模型通常通过对大量文本数据的训练，掌握语言规律并能够生成合适的内容，但缺乏像 推理模型那样复杂的推理和决策能力。 维度 推理模型 通用模型 优势领域 数学推导、逻辑分析、代码生成、复杂问题拆解 文本生成、创意写作、多轮对话、开放性问答 劣势领域 发散性任务（如诗歌创作） 需要严格逻辑链的任务（如数学证明） 性能本质 专精于逻辑密度高的任务 擅长多样性高的任务

DeepSeek是什么？ AI + 国产 + 免费 + 开源 + 强大 • DeepSeek是一家专注通用人工智能（AGI）的中国科技公司，主攻大模型研发与应 用。 • DeepSeek-R1是其开源的推理模型，擅长处理复杂任务且可免费商用。 Deepseek可以做什么？ 直接面向用户或者支持开发者，提供智能对话、文本生成、语义理解、计算推理、代码生成补全等应用场景， 当人人都会用AI时，你如何用得更好更出彩？ 推理模型 • 例如：DeepSeek-R1，GPT-o3在逻辑推理、数学推理和实时问题解决方面表现突出。 推理大模型： 推理大模型是指能够在传统的大语言模型基础上，强化推理、逻辑分析和决策能力的模型。它 们通常具备额外的技术，比如强化学习、神经符号推理、元学习等，来增强其推理和问题解决能力。 非推理大模型： 适用于大多数任务，非推理大模型一般侧重于语言生成、上下文理解和自然语言处理，而不强 解和自然语言处理，而不强 调深度推理能力。此类模型通常通过对大量文本数据的训练，掌握语言规律并能够生成合适的内容，但缺乏像 推理模型那样复杂的推理和决策能力。 维度 推理模型 通用模型 优势领域 数学推导、逻辑分析、代码生成、复杂问题拆解 文本生成、创意写作、多轮对话、开放性问答 劣势领域 发散性任务（如诗歌创作） 需要严格逻辑链的任务（如数学证明） 性能本质 专精于逻辑密度高的任务 擅长多样性高的任务

. . . . 制造输出和绘制 钻孔文件 元件放置文件 额外的制造产出 打印 正在导出文件 封装和封装库 管理封装库 创建和编辑封装 高级主题 配置和自定义 Text variables 自定义设计规则 脚本 使用 IDF 元件边框的工作 操作参考 PCB 编辑器 3D 查看器 通用 57 59 60 61 62 63 65 65 67 68 如果你已经安装了标准的 KiCad 封装库并想使用它们，但第一个选项被禁用，选择第二个选项并浏览到安装 KiCad 库的目录中的 fp-lib-table 文件。 如果你已经有了一个你想使用的自定义封装库表，选择第二个选项并浏览到你的 fp-lib-table 文件。 如果你想从头开始构建一个新的封装库表，选择第三个选项。 Footprint library management is described 键盘上的按键标签。在苹果键盘布局中，使用 键来代替 ，使用 键来代替 。 许多动作默认没有分配快捷键，但可以使用快捷键编辑器（偏好设置 → 偏好设置… → 《偏好控制，快捷键》）分配 或重新定义快捷键。 NOTE 通过快捷键可用的许多操作也可在上下文菜单中使用。要访问上下文菜单，请在编辑画布中单击 鼠标右键。根据选择的内容或处于活动状态的工具，将提供不同的操作。 快捷键存储在 KiCad