Admin

Dashbot-beheer: inzicht in runs, tool-calls en kwaliteit

Dashbot-beheer is het operationele observatiescherm voor tenant-admins. Je gebruikt het om te begrijpen hoe Dashbot presteert, waar fouten ontstaan en welke prompts of tools opvallend duur of instabiel zijn.

Dashbot-beheer: inzicht in runs, tool-calls en kwaliteit overzicht
Dashbot-beheer: inzicht in runs, tool-calls en kwaliteit overzicht.

1. KPI-kaarten bovenaan

Runs

Laat zien hoeveel aanvragen in het huidige steekproefvenster zijn meegenomen.

Succesratio

Toont de verhouding tussen geslaagde en mislukte runs en helpt trends in betrouwbaarheid te spotten.

Gemiddelde duur

Handig om langzame prompts, toolketens of piekmomenten te herkennen.

Tool-calls

Laat zien hoeveel toolgebruik Dashbot nodig had. Opvallende pieken kunnen wijzen op over-orkestratie.

Steekproeflimiet

Helpt interpreteren of je naar een volledige of afgekapt overzicht kijkt.

2. Grafieken voor snelle diagnose

Aanvraagbronnen

Laat zien of Dashbot vooral vanaf de Dashbot-pagina, gedeelde kamers, alerts of andere routes wordt gebruikt. Gedeelde runs hebben bron dashbot-room.

Runs per 10 minuten

Handig om drukte, piekbelasting of plotselinge foutclusters te koppelen aan een tijdvenster.

Duurtrend

Laat zien of de gemiddelde responstijd stabiel blijft of langzaam verslechtert.

3. Requests tabel

De tabel is de dagelijkse werkplek voor diagnose. Hier kun je recente runs sorteren, details openen en snel zien welke prompts fout gingen of buitensporig veel tijd/tool-calls kostten.

Kolom Gebruik
TijdGeeft de chronologie van runs weer en helpt bij correlatie met incidenten of deploys.
BronMaakt onderscheid tussen privéchat, dashbot-room, alerts en andere Dashbot-ingangen.
StatusLaat snel zien of de run geslaagd of gefaald is.
Totale tijdHelpt om trage runs eruit te filteren.
Tool-callsLaat zien of een run veel externe stappen nodig had.
VraagToont een preview van de prompt voor snelle herkenning.

4. Wat zie je in een run-detail?

  1. Open een run vanuit de tabel met het vergrootglas.
  2. Controleer eerst status, duur, run-ID en aantal tool-calls.
  3. Lees daarna prompt en antwoord om te beoordelen of het functionele resultaat klopt.
  4. Controleer bij bron dashbot-room de oorspronkelijke aanroeper en of de server bewerkbevoegdheid verleende op basis van diens actuele allowDashbotMcpEdit-recht. Kameraanvragen bevatten geen bewerkmoduskeuze en de kamereigenaar verleent geen rechten aan de run.
  5. Gebruik de tool-call tijdlijn om te zien waar tijd verloren ging of waar een keten vastliep.
  6. Gebruik de events-tabel voor diepere diagnose van fases, tools en foutmeldingen.
  7. Run-samenvattingen en detailchunks worden in Firestore onder tenants/{tenantId}/runtimeLogs/_tenant/dashbotRuns opgeslagen en via Firestore TTL op expireAt bewaard.
  8. Operationele room-run logs blijven zeven dagen beschikbaar, ook wanneer de maker de gedeelde kamer en het transcript verwijdert.

5. Hoe interpreteer je deze pagina?

6. Schermuitleg

Werk hier van breed naar diep: eerst trendbeeld, daarna pas de detailrun met tool-call tijdlijn.