基础篇
进阶篇
高频篇
精选篇
手写篇
面经篇
AI 篇
原理篇
每日一题
小程序题库
知识卡片
  • 场景篇按分类整理的大前端场景考点
  • 历年面经按年份追踪真实考点
  • 算法题库NEW在线编码即时判题
  • 专项自测100 题快速查漏
  • 前端基础
    • HTTP从报文一路讲到 HTTPS
    • 浏览器渲染、事件循环、进程
    • 计算机基础Linux、网络、操作系统
  • 进阶专项
    • 设计模式23 种模式怎么用
    • 前端系统进阶学习大型项目工程化
    • 前端综合文章长期沉淀的实践文
  • 工程与工具
    • Node学习指南从环境搭建到服务端
    • NPM工作流script、依赖与发布
    • Docker容器化部署上手
    • Canvas图形与动画实战
  • 路线与导图
    • 思维导图知识点全景图
    • 学习路线按图索骥不跑偏
  • 动态
    • 公众号动态公众号历史文章
    • 博客动态站长的技术博客
    • 开发者导航常用工具与文档站
  • AI 助手随时提问,即时解析
  • AI 模拟面试模拟真实面试 + 报告
  • AI 知识地图串起全站知识点
  • AI 定制路线按你的简历现排
AI 热点
旧版
AIHT
内容
精选全部 AI 动态热点榜AI 日报收藏
分类
模型行业编程产品技术观点开源
更多
Agent 接入
返回首页开发者导航
AIHT
精选 / 资讯详情
8.0
热点
AI SCORE
技术实践2026-10-23 18:32

把提示词和检索语料纳入依赖管理

dev.to · AI#LLMOps#依赖管理#提示词安全
Editor brief · 编辑速览

文章将LLM故障归因扩展到检索语料、提示词模板和未经校验的工具响应,主张像管理软件依赖一样固定版本、审查变更。还指出动态模型别名与外部文档中的隐藏指令会引入行为漂移和安全风险。

文章思维导图
Knowledge map
拖拽缩放
AI brief

原文暂未完整获取,基于公开信息的快读

LLM 功能出了问题,排查范围不能只停在模型上。dev.to 的这篇文章把检索语料、提示词模板和工具响应放进依赖管理的视角:这些输入一旦悄悄变化,系统行为也可能跟着变。作者主张为它们记录版本、审查变更,并保留能追溯到具体请求的证据。

目前能确认什么

作者根据自己参与处理的故障指出,问题经常来自模型读到的语料、被修改的提示词,以及未经校验的工具响应。这是作者的经验陈述,不能据此断言所有 LLM 系统都有相同的故障分布。

软件依赖通常通过锁文件固定版本;检索增强生成(RAG)还会把检索到的文档交给模型,因此语料变化同样可能影响答案。动态模型别名则增加了另一层不确定性:调用名称没变,背后的模型行为未必保持一致。

节选给出的做法是建立只追加的语料清单,记录文档标识、内容哈希、来源和信任等级,再纳入 Git 审查。清单负责让变化可见,检索层负责执行信任规则。 示例里的正则只能辅助筛查隐藏指令,作者也明确承认它会漏检。

评测方面,作者要求关联提示词、语料、评测运行和部署记录,同时观察具体失败用例的变化,不能只盯总分。

我的判断

对程序员最直接的启发是:知识库更新和提示词修改,都应该被当作可能改变线上行为的发布动作。

如果客服助手突然答错,排查时应能还原当时使用的提示词、检索文档和工具返回。只有模型名称与耗时,往往解释不了答案为什么变了。

不过,内容哈希能证明输入是否变化,不能证明输入可信。 外部文档里的隐藏指令和伪造事实,还需要来源审查、权限边界与对抗评测配合处理。

节选没有展开工具响应如何校验,灰度发布部分也不完整。它提供的是一套可追溯的管理思路,尚不足以证明这些措施能覆盖多少故障或攻击。

Original source

本文由 AI 基于公开信息编写,细节以原文为准,来源 dev.to · AI,原文版权归原作者所有。

阅读原文
上一篇
Claude 为百余开源库生成正确性证明
下一篇
多模态上下文裁剪别按图片字符串计费

资讯速览

dev.to · AI · 2026-10-23 18:32

AI 评分 8.0 / 10

相关标签

#LLMOps#依赖管理#提示词安全

继续阅读

  • 推理拆分部署,瓶颈可能在交接调度
  • Claude 为百余开源库生成正确性证明
  • 多模态上下文裁剪别按图片字符串计费
  • 用 Git 工作树隔离多个 AI 编程会话
  • 用 Python 和 SQLite 跑通文档问答