Anlegen von Rubriken
Informationen zum Erstellen einer Rubrik
Nachdem Sie ein Modell für die Bewertung ausgewählt haben, können Sie eine Rubrik anlegen. Rubriken definieren die Bewertungskriterien für Dokumente. Sie können Inhalte festlegen, die vorhanden oder abwesend sein sollten, um zu bestehen, die relative Gewichtung und automatische Fehler für jedes Bewertungskriterium.
Tipp: Wenn Sie Stakeholdern zeigen möchten, wie Ihre Rubriken definiert sind, können Sie das Objekt-Viewer-Widget verwenden, um eine Rubrik in Ihrem Dashboard anzuzeigen.
Anlegen einer Rubrik
Tipp: Um eine Rubrik zu erstellen, müssen Sie die Berechtigung “Rubriken verwalten” haben, über einen Datenzugriff auf Administratorenebene für ein Projekt verfügen und Mitglied der Gruppe“Intelligent Scoring UI” sein.
- Melden Sie sich in Studio an.
- Öffnen Sie das globale Navigationsmenü.
- Wählen Sie Intelligentes Scoring.
- Wählen Sie ein Projekt aus dem Dropdown-Menü aus.
- Klicken Sie auf Neue Rubrik erstellen.
- Nennen Sie Ihre Rubrik.
Tipp: Jede Rubrik im Projekt muss einen eindeutigen Namen haben.Tipp: Das Wort „Score“ wird automatisch zum intelligenten Score hinzugefügt, sodass Sie es nicht im Namen der Rubrik verwenden müssen. - Wählen Sie das Rubrik-Modell aus. Weitere Informationen finden Sie unter Bewertungsmodell auswählen.
- Wählen Sie die Themen aus, die Sie in die Rubrik aufnehmen möchten. Sie können über die Suchleiste nach Themen suchen. Um ein Thema zu erweitern, klicken Sie auf das Pluszeichen (+).
Tipp: Sie können mehrere Rubriken pro Modell erstellen, aber jedes bestimmte Thema (einschließlich seiner Geschwister und untergeordneten Elemente) kann nur in 1 Rubrik verwendet werden. Wenn Sie feststellen, dass bestimmte Themen nicht verfügbar sind, liegt dies höchstwahrscheinlich daran, dass sie bereits in einer anderen Rubrik verwendet werden.
- Klicken Sie auf Weiter.
- Wählen Sie optional einen Treiber aus, um die vorgeschlagenen Ränge für Ihre Themen anzuzeigen. Weitere Informationen finden Sie unter Treiber für ergebnisorientiertes Scoring verwenden.
- Legen Sie für Gewünschtes Ergebnis fest, wann die Gewichtung der einzelnen Themen der endgültigen Bewertung des Dokuments hinzugefügt wird oder ob das Dokument automatisch fehlschlägt:
- Vorhanden (kein automatischer Fehler): Wenn dieses Thema im Dokument vorhanden ist, erhöhen Sie die Bewertung um die dem Thema zugeordnete Gewichtung.
Beispiel: Ein höflicher Gruß in einer Support-Interaktion.
- Abwesend (kein automatischer Fehler): Wenn dieses Thema im Dokument nicht vorhanden ist, erhöhen Sie die Bewertung um die dem Thema zugeordnete Gewichtung.
Beispiel: Der Ausdruck der Unsicherheit in einer Produktprüfung oder einem repräsentativen Anruf.
- Vorhanden (automatisch fehlgeschlagen): Das gesamte Dokument erhält eine Bewertung von 0, wenn das Thema im Dokument nicht vorhanden ist.
Beispiel: Sie haben ein obligatorisches Skript, eine Verifizierungserklärung oder eine Einverständnisfrage, die der Vertreter jedes Mal stellen muss.
- Abwesend (automatisch fehlgeschlagen): Das gesamte Dokument erhält eine Bewertung von 0, wenn das Thema im Dokument vorhanden ist.
Beispiel: Unprofessionelles Verhalten.
- Vorhanden (kein automatischer Fehler): Wenn dieses Thema im Dokument vorhanden ist, erhöhen Sie die Bewertung um die dem Thema zugeordnete Gewichtung.
- Automatisch fehlgeschlagen setzt die endgültige Bewertung des Dokuments auf 0, wenn das gewünschte Ergebnis für das Thema nicht erreicht wird.
Tipp: Sie können weiterhin sehen, ob das Dokument jedes zusätzliche Thema bestanden oder nicht bestanden hat, obwohl Sie nicht sehen können, wie viele Punkte gesammelt worden wären.
- Legen Sie die numerische Gewichtung für das Thema fest. Je mehr Gewichtung ein Thema hat, desto mehr wirkt es sich auf die Bewertung des Dokuments aus.
Tipp: Die Spalte Gewichtung (N) zeigt die Gewichtung jedes Themas an, die normalisiert wurde, um zusammen 100 % zu ergeben. Diese Werte werden automatisch berechnet.
- Definieren Sie die Zielpunktzahl, um diese Rubrik zu bestehen. Es gibt zwei Möglichkeiten, das Ziel zu definieren.
- Ziel: Legen Sie eine exakte Punktzahl für das Bestehen fest. Dokumente, deren Punktzahl größer oder gleich dem Ziel ist, gelten als „Bestanden“. Dokumente, die unter dem Ziel liegen, werden als „nicht bestanden“ betrachtet.
- Ziel (N): Legen Sie eine Punktzahl für das Bestehen als Prozentsatz der Gesamtsumme von 100 % fest.
Tipp: Sie können dem Ziel (N) bis zu 3 Dezimalstellen hinzufügen.
- Testen Sie Ihre Rubrik mit der Schaltfläche „Spot Check“, bevor Sie sie offiziell verwenden.
Tipp: Siehe Spot-Prüfung verwenden.
- Klicken Sie auf Speichern.
Sie sind nun bereit, Ihre Rubrik zu aktivieren.
Spot-Prüfung verwenden
Mit der Schaltfläche „Spot Check“ können Sie testen, wie Ihre Dokumente auf Ihrer Rubrik ablaufen, bevor Sie sie offiziell verwenden. Die Spot-Prüfung berechnet die Punktwerte für bis zu 10.000 zufällig ausgewählte Dokumente gleichzeitig.
Tipp: Alle Änderungen, die Sie an der Rubrik vornehmen, werden auf denselben 10.000 Dokumenten getestet, bis Sie den Cache leeren.
- Ergebnis: Wie viele der getesteten Dokumente unterschritten die Zielpunktzahl.
- Ziel (N): Der prozentuale Anteil des aktuellen Zielwerts an der Gesamtsumme.
- Minimum/Maximum: Die niedrigste und höchste Punktzahl, die in den getesteten Dokumenten gefunden wurde.
- Durchschnitt: Die durchschnittliche Punktzahl der getesteten Dokumente.
- Quartile: Scores für unteres Quartil, Median und oberes Quartil. Dies kann Ihnen dabei helfen, zu ermitteln, wie genau die vom Test gezogene Probe sein wird.
- Potenzielle Abdeckung: Wie viele Daten Ihres Projekts werden wahrscheinlich mit dem in der Rubrik ausgewählten Modell bewertet. Hiermit können Sie Ihre Themenausschlüsse anpassen.
- Cache löschen: Klicken Sie auf diese Schaltfläche, um einen anderen Satz von 10.000 Dokumenten zu testen.
Tipp: Prüfen Sie Stichproben von bis zu 10.000 Dokumenten, unabhängig von Datumsbereichsfiltern, die im Projekt enthalten sind. Wenn der Datumsbereich nicht 10.000 Dokumente enthält, wird die Stichprobe mit dem vollständigen Datenset ausgeführt.