Instruction-Tuning
Auch: Supervised Fine-Tuning · SFT · Post-Training
Nachtraining mit Beispielen aus Anweisung und guter Antwort, damit ein Modell Aufträge zuverlässig befolgt.
Nach dem Vortraining kann ein Modell zwar Text fortsetzen, versteht aber nicht automatisch, dass es eine Frage beantworten soll. Instruction-Tuning zeigt ihm Tausende Beispiele wie „Fasse diesen Text zusammen“ samt vorbildlicher Antwort.
Zusammen mit RLHF und weiteren Verfahren bildet es das sogenannte Post-Training, das aus einem Rohmodell einen nützlichen Assistenten macht.
Allgemeine Information, keine Rechts- oder Fachberatung.