Überwachung des Vertriebsvertragsverwaltungsagenten

Online bearbeiten

Im letzten Teil des Tutorials überwachen Sie die Leistung, Aktivität und den allgemeinen Zustand des Sales Contract Management-Agenten. Durch die Überprüfung von Spuren und wichtigen Kennzahlen können Sie Probleme schnell identifizieren, das Verhalten des Agenten optimieren und dazu beitragen, dass er kontinuierlich geschäftlichen Mehrwert liefert.

Vorbereitende Schritte

Wenn Sie eine „ watsonx.governance “-Instanz in derselben „ IBM Cloud “-Region wie Ihre „ IBM “-Instanz unter watsonx Orchestrate haben, können Sie die bereitgestellten Agenten direkt über das Dashboard unter watsonx.governance überwachen. In anderen Fällen können Sie ausschließlich über die Agent -Analyseseite unter watsonx Orchestrate auf Traces und Metriken zugreifen.

Weitere Informationen finden Sie unter „Voraussetzungen für die Überwachung der Agenten “.

Überwachung der Agentenanalyse

Um Agentenmetriken zu analysieren, die Leistung zu bewerten und die Ursache von Fehlern zu identifizieren, können Sie die folgenden Schritte ausführen:

  1. Wählen Sie unter IBM watsonx Orchestrate im Menü die Option „Analysieren“ aus.

  2. Wählen Sie auf der Seite „Agentenanalyse “ den Agenten „Vertriebsvertragsmanagement“ aus der Tabelle „Agenten“ aus.

  3. Sehen Sie sich die Tabelle „Traces“ an, um die Aktivitäten des Agenten anzuzeigen. Wenn Sie einen Fehler finden, klicken Sie auf die Spur, um die Details anzuzeigen.

Tipps zur Analyse von Traces

  • Im linken Bereich der Ablaufverfolgung zeigen die roten Punkte fehlgeschlagene Spans an und geben genau an, welcher Dienst oder welcher Vorgang den Fehler verursacht hat, z. B. wxo-server, tools-runtime, model call, und andere.

  • Die horizontalen Balken zeigen an, wie lange jeder Vorgang gedauert hat. Wenn ein lang andauernder Vorgang fehlschlägt, kann dies unter anderem auf Zeitüberschreitungsprobleme, Tool-Latenz oder eine langsame Modellreaktion hindeuten.

  • Verfolgen Sie Eltern-Kind-Beziehungen zurück, um zu sehen, was den Fehler ausgelöst hat. Fehler treten häufig innerhalb eines Tools oder eines verschachtelten Schritts auf, und Traces zeigen Ihnen, wo die Kette unterbrochen wurde.

  • Jede Spanne enthält in der Regel Metadaten (Eingaben, Ausgaben, Fehler). Mit Hilfe von Traces können Sie Folgendes überprüfen:

    • Was der Agent an jedes Tool oder Modell gesendet hat.

    • Was das Tool zurückgegeben hat.

    • Ob fehlerhafte oder fehlende Daten einen nachgelagerten Fehler verursacht haben.

Weitere Informationen finden Sie unter „Trace-Details “.

Überwachung des Agenten auf dem Dashboard „ watson.gorvenance “

Wenn der Überwachungsagent auf dem Dashboard „ watson.gorvenance “ verfügbar ist, können Sie die folgenden Schritte ausführen:

  1. Wählen Sie unter IBM watsonx Orchestrate im Menü die Option „Analysieren“ aus.

  2. Suchen Sie auf der Seite „Agentenanalyse“ in der Tabelle „Agenten“ nach dem Agenten „Vertriebsvertragsmanagement “.

  3. Schalten Sie in der Spalte „Monitor“ für den ausgewählten Agenten auf „Ein “.

  4. Klicken Sie im angezeigten Meldungsfenster auf „Agentenüberwachung aktivieren “.

Nachdem der Aktivierungsprozess abgeschlossen ist, klicken Sie auf das Dashboard-Symbol, wodurch Sie zum Dashboard „ watson.gorvenance “ weitergeleitet werden. In diesem Dashboard können Sie einige Agentenmetriken zur Nutzung und Leistung von Gesprächen, zur Qualität der Tools, zu Warnmeldungen und zu anderen Aspekten einsehen.

Weitere Informationen finden Sie unter „Bewertung von KI-Agenten und agentenbasierten Anwendungen “.