LLM 技术报告 大语言模型（LLM） 技术作为人工智能领域的一项重要创 新在今年引起了广泛的关注。 LLM 是利用深度学习和大数据训练的人工智能系统，专门 设计来理解、生成和回应自然语言。这些模型通过分析大量 的文本数据来学习语言的结构和用法，从而能够执行各种语 言相关任务。以 GPT 系列为代表，LLM 以其在自然语言 处理领域的卓越表现，成为推动语言理解、生成和应用的引 擎。 LLM LLM 在多个领域都取得了令人瞩目的成就。在自然语言处 理领域，GPT 系列模型在文本生成、问答系统和对话生成 等任务中展现出色的性能。在知识图谱构建、智能助手开发 等方面，LLM 技术也发挥了关键作用。此外，它还在代码 生成、文本摘要、翻译等任务中展现了强大的通用性。 本报告从技术人视角出发，将深入探讨 LLM 技术的背景、 基础设施、应用现状，以及相关的工具和平台。 2 / 32 LLM Tech Tech Map  向量数据库  数据库向量支持  大模型框架、微调 (Fine Tuning)  大模型训练平台与工具 基础设施 LLM Agent  备案上线的中国大模型  知名大模型  知名大模型应用 大模型 算力 工具和平台  LLMOps  大模型聚合平台  开发工具 AI 编程  插件、IDE、终端  代码生成工具 编程语言 3 / 32

你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.17 Weblate 4.16.4 Weblate 4.16.3 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注册 自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开

或安装在你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.16.4 Weblate 4.16.3 Weblate 4.16.2 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注 册自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开

或安装在你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.16.3 Weblate 4.16.2 Weblate 4.16.1 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注 册自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开

或安装在你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.16.2 Weblate 4.16.1 Weblate 4.16 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注 册自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开

或安装在你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.16.1 Weblate 4.16 Weblate 4.15.2 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注 册自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开

或安装在你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.16 Weblate 4.15.2 Weblate 4.15.1 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注 册自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开

你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.18.1 Weblate 4.18 Weblate 4.17 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注册 自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开

你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.18.2 Weblate 4.18.1 Weblate 4.18 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注册 自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开

你电脑上的IRC客户端来访问。 许可协议 版权所有 © Michal Čihař michal@weblate.org 本程序是自由软件：您可以在自由软件基金会发布的 GNU 通用公共许可证第 三版，或（您选择的）更新版本的条款之下，将其重新发布并且/或者修改。 发布本程序希望它有用，但不作任何担保；甚至没有应用可销售性或适于特定 目的的担保。更多细节请参见 GNU 通用公共许可证 [https://www.gnu Weblate 贡献代码 Weblate 源代码 调试 Weblate Weblate 内部 开发附加组件 Weblate 前端 在 Weblate 中汇报问题 Weblate 测试套件与持续集成 数据架构 发布 Weblate 安全和隐私 为 Weblate 模块作贡献 关于 Weblate 许可协议 更新日志 Weblate 4.18 Weblate 4.17 Weblate 4.16.4 Weblate nette.org/en/open-files-in-ide] 中找到有关为编辑器注册 自定义 URL 协议的更多信息。 特殊字符 虚拟键盘 中要包括的其他特殊字符。 通知 从 通知 选项卡订阅各种通知。有关已观看或管理的项目的选定事件的通知将 通过电子邮件发送给您。 某些通知仅针对您语言的事件发送（例如，关于要翻译的新字符串），而某些 通知在组件级别触发（例如合并错误）。这两组通知在设置中在视觉上是分开