Lerninhalt: Die QS-Startberatung prüft
systematisch, ob freie Fragen entlang der vorhandenen
Wissenskette beantwortet werden. Die Bewertung trennt Flow,
Antwortinhalt, tatsächlich verwendete Evidenz,
Quellenkonsistenz und daraus abgeleitete Gesamtbewertung;
die Diagnose gliedert zusätzlich
Originalquelle, Aggregation, Claim, aktive Wissenskarte,
Auswahl und Antwortbildung. Fachprofile sind nur bei
kundenspezifischer Begrifflichkeit oder freien
Startberatungssignalen der richtige Ort.
Wann nutzen? Nach größeren Änderungen an
Wissenskarten, Prompts oder Quellen. Einzelne Chatläufe
zeigen Beispiele; QS-Läufe zeigen Muster.
Schritte:
- Öffnen Sie Testen und die Ansicht QS-Startberatung.
- Wählen Sie Ihren Service
Heizkostenzuschuss_{ihr_vorname}.
- Prüfen Sie, ob passende freie Fragen vorhanden sind.
- Starten Sie den QS-Lauf für den Service.
- Öffnen Sie eine Bewertung und vergleichen Sie Flow, Antwortinhalt, Evidenz, Quellenkonsistenz, Gesamtbewertung, Wissensketten-Stufe sowie Suchkandidaten, Reranker-Auswahl, Ergänzungen, finalen Kontext und nachweislich verwendete Wissenskarten. Steht die Verwendung auf unbekannt, darf keine Kontext- oder Auswahlkarte als verwendet gelten. Eine erfolgreiche Antwort-Fit-Prüfung kann eine einzelne tragende Karte belegen; bei mehreren Karten ist eine ausdrückliche Zuordnung nötig. Sind Antwort, Verwendung und positive Wissenskette belegt, muss die Gesamtbewertung 100 % ohne Diagnose-Tag zeigen. Eine fachlich exakte Antwort muss in der Antwortachse korrekt bleiben, auch wenn die Evidenz unbekannt oder die Quellenkonsistenz nur teilweise korrekt ist. Unterscheiden Sie außerdem Quelle prüfen von Evidenzspur unklar: Nur der erste Zustand verlangt Quellenprüfung; der zweite betrifft Judge oder Laufzeitspur.
- Prüfen Sie den Bewertungsmodus. Bei Technischer Judge-Ausfall sind unbekannte Fachachsen kein fachlicher Mangel und kein Ersatzscore; nur ein unabhängig ermitteltes Matrixurteil zum Flow bleibt belastbar.
- Prüfen Sie Berechnungen zusätzlich mit einer Einperioden- und einer Mehrperiodenfrage. Bei einem Wochenbetrag muss eine genannte Wochenanzahl in Eingaben und Gesamtergebnis einfließen; konfigurierte Grundformen wie normal und ganztägig müssen auch in üblichen flektierten Formulierungen erkannt werden. Eine sichtbare Rückfrage nach einem tatsächlich fehlenden Pflichtwert ist eine korrekte Kontrollantwort; eine alte Karte ohne Wochenanzahl muss kontrolliert als unvollständig enden.
Ergebnis: Sie können unterscheiden, ob ein
Problem am Dialogschritt, Antwortinhalt, belegter Kartenverwendung oder an
Originalquelle, Aggregation, Claim, Wissenskarte, Auswahl
beziehungsweise Antwortbildung liegt.