我让客服意图识别模型靠50条标注+LoRA转起来,准确率从78%卷到91%——中小团队的数据飞轮实操手记
客服意图识别模型上线后准确率只有78%,被业务方喷了一周。我放弃了标注海量数据的想法,搭建了一套数据飞轮:主动学习每轮挑50条最难样本,GPT-4生成合成数据补充长尾表达,LoRA微调后快速上线。六轮迭代后准确率冲到91%,人力成本几乎为零。本文把选择和生成脚本、微调流程全盘托出,中小团队完全可以复制。
客服意图识别模型上线后准确率只有78%,被业务方喷了一周。我放弃了标注海量数据的想法,搭建了一套数据飞轮:主动学习每轮挑50条最难样本,GPT-4生成合成数据补充长尾表达,LoRA微调后快速上线。六轮迭代后准确率冲到91%,人力成本几乎为零。本文把选择和生成脚本、微调流程全盘托出,中小团队完全可以复制。