
MLflow 的 Prompt Registry 文档介绍如何保存提示、跟踪版本和标记应用所使用的模板。适合已有实验、评估或模型调用记录的团队,将实际输出与对应提示词联系起来,方便对照改动和回退。

| 方向 | 具体用途 | 核对要点 |
|---|---|---|
| 注册模板和变量 | 为重复任务记录提示内容、参数和预期输出 | 保留任务描述、输入来源和使用人员 |
| 维护版本及别名 | 查看不同版本,决定测试与实际使用的版本 | 确认运行时是加载固定版本还是指定别名 |
| 追到应用评估 | 结合跟踪记录、项目和样例比较实际输出 | 使用同一批数据明确改动的真实效果 |
| 你的需求 | 可用资源 | 适用原因 |
|---|---|---|
| 已经用 MLflow 记录模型应用 | MLflow Prompt Registry | 可将提示词版本与应用运行或实验关联 |
| 独立管理团队提示和部署标签 | PromptLayer Prompt Registry | 适合使用版本和发布标签组织调用 |
| 想查模型应用评估和工作流 | LangWatch | 可以结合观察与评估比较模板 |
团队要更新会议摘要的字段要求,同时保留旧版本供上游应用在迁移时使用。
官方页面可公开浏览。应用用量、注册、订阅和材料许可按官方说明核对。
还需记录模型、参数、实际输入和调用条件。评估时应保留当时使用的数据与测试口径。
不同 MLflow 版本和后端的支持范围有差异。结合当前项目与运行服务核对。