明确表达需求,给 AI 生成提示词,将提示词给大模型生成应用
提示词 = 用 提示词技巧 表达 明确的需求
明确的需求 = 用 专业知识 探索 特定场景 下的 最佳实践
使用 AI 生成提示词,输入以下语句
我的需求是“用武侠故事情节为代码添加注释”, 我认为需求的最佳实践是“将代码逻辑与故事情节映射”。 请基于最佳实践给出完整实现步骤
AI 生成提示词,将提示词给大模型,大模型生成应用
合规隐私要求:筛选符合条件的模型
使用国内模型
不直接将模型包装成产品,而是利用模型能力提效
领域能力评估:构建评估指标
通用模型 / 领域专业模型
验证与测试:评估并筛选最终的模型
通过前两个筛选出符合要求的大模型
根据需求设计评估维度,正向 内容质量 结构稳定,负向 时间消耗 成本消耗
benchmark 根据评估维度 筛选大模型
评估器也是 AI 通过提示词评估分数。 一个模型跑多次
得到多份报告,再给分析器去分析报告
https://github.com/AI-FE/wuxia-comment
拆分流程,多次输入