LangKit

为提示词与回答样本生成文本质量指标

准备输入

• 允许分析的提示词与模型回答样本。
• 已安装 LangKit 和相关依赖的 Python 环境。

操作步骤

1. 安装所需 LangKit 模块，准备包含 prompt 和 response 字段的文本样本。
2. 导入 llm_metrics，以初始化的 schema 调用 why.log 计算指标。
3. 检查指标记录，结合具体文本定位需要人工复核的回答或输入，再记录改进方向。

相似度、模式匹配和一致性指标只是检查信号，不能单独证明回答正确或请求安全；应结合文本内容及具体应用规则解释结果。