指令微调
教材《人工智能导论》5.4.2 / 内部第2点 · 已审核
通俗解释
指令微调在预训练模型上使用“指令—输出”样本继续训练,使模型更适合按任务要求回答。
例子
给模型“摘要这段文字”的指令及示范答案,训练它按任务要求输出。
容易混淆
指令微调提高任务遵循能力,不保证每个回答都真实可靠。
检查理解
用自己的话解释“指令微调”在“预训练-指令微调-对齐新范式”中的作用,并举出教材中的一个例子或适用场景。对照原文检查条件、公式和图表。
查看参考答案
要点:指令微调在预训练模型上使用“指令—输出”样本继续训练,使模型更适合按任务要求回答。 示例:给模型“摘要这段文字”的指令及示范答案,训练它按任务要求输出。