AI monitoring

AI monitoring zobrazuje, co v TAS dělá AI asistent: konverzace s uživateli, rozpracované AI workflow, požadavky na potvrzení od uživatele, jednotlivá volání jazykového modelu a nástroje, které model použil. Slouží k dohledu nad využitím AI a k řešení problémů. Stránku vidí jen super administrátor, otevřete ji v menu Administrace kartou AI monitoring v kategorii Monitorování a údržba. Běžný administrátor kartu nevidí a stránku neotevře.

Stránka je jen pro čtení, nic na ní neupravíte ani nesmažete.

Ovládání stránky

PrvekK čemu slouží
ZavřítVrátí vás do menu Administrace.
ZáložkyKonverzace, Workflows, Požadavky na akci uživatele, LLM běhy a Volání LLM nástrojů. Každá záložka má vlastní adresu, takže si ji můžete uložit do záložek prohlížeče.
TabulkaSeznam záznamů vybrané záložky s filtrem v každém sloupci, řazením a exportem do souboru. Ve výchozím stavu jsou nejnovější záznamy nahoře. Na mobilu se záznamy zobrazují jako karty.

Ve sloupcích s uživatelem (Aktualizoval, Vytvořil) se zobrazuje ID uživatele a jeho zobrazované jméno. Sloupce s technickými daty (Čekající otázky, Stav, Detaily) ukazují data ve formátu JSON.

Konverzace

Rozhovory uživatelů s AI asistentem.

SloupecK čemu slouží
ID konverzaceČíslo konverzace. Na něj odkazují ostatní záložky ve sloupci Konverzace.
TitulekNázev konverzace.
RežimRežim, ve kterém asistent pracoval.
KanálKanál, kterým konverzace probíhala.
ShrnutíShrnutí konverzace, které si asistent ukládá jako paměť.
AktualizovalUživatel, který konverzaci naposledy změnil.
AktualizovánoČas poslední změny. Podle něj je tabulka seřazená.
VytvořenoČas založení konverzace.

Workflows

Vícekrokové úlohy, které asistent v rámci konverzace provádí.

SloupecK čemu slouží
IDČíslo workflow.
KonverzaceID konverzace, ke které workflow patří.
StatusStav workflow.
Čeká na akci uživateleNa jakou akci uživatele workflow čeká, pokud čeká.
Čekající otázkyOtázky, na které asistent čeká odpověď.
Aplikační chybaChyba, kterou workflow skončilo.
StavVnitřní stav workflow.
Aktualizoval, Aktualizováno, VytvořenoKdo a kdy workflow naposledy změnil a kdy vzniklo.

Požadavky na akci uživatele

Situace, kdy asistent potřeboval, aby uživatel něco potvrdil nebo doplnil.

SloupecK čemu slouží
IDČíslo požadavku.
KonverzaceID konverzace.
ZprávaID zprávy v konverzaci, ke které požadavek vznikl.
TypDruh požadavku.
StatusStav požadavku.
DetailyPodrobnosti požadavku.
VytvořilUživatel uvedený jako autor požadavku.
Aktualizováno, VytvořenoČas poslední změny a vzniku. Tabulka je seřazená podle času vzniku.

LLM běhy

Jednotlivá volání jazykového modelu. Hodí se ke sledování spotřeby a rychlosti.

SloupecK čemu slouží
IDČíslo běhu.
KonverzaceID konverzace.
Poskytovatel modeluSlužba, která model poskytuje.
Název modeluPoužitý model.
Vstupní tokenyPočet tokenů, které model dostal.
Výstupní tokenyPočet tokenů, které model vrátil.
Latence (ms)Jak dlouho volání trvalo, v milisekundách.
VytvořilUživatel uvedený jako autor běhu.
VytvořenoČas volání.

Volání LLM nástrojů

Nástroje TAS, které model během běhu zavolal.

SloupecK čemu slouží
IDČíslo volání.
BěhID běhu ze záložky LLM běhy.
Název nástrojeKterý nástroj model zavolal.
StatusJak volání dopadlo.
VytvořenoČas volání.

Jak dohledat, co asistent v konverzaci dělal

  1. Na záložce Konverzace najděte konverzaci podle titulku a poznamenejte si její ID.
  2. Na záložce LLM běhy najděte řádky se stejným číslem ve sloupci Konverzace. Uvidíte všechna volání modelu včetně spotřeby tokenů.
  3. Na záložce Volání LLM nástrojů najděte řádky s ID těchto běhů ve sloupci Běh. Zjistíte, které nástroje model použil a jak volání dopadla.

Související: Menu Administrace, Přístup k API

Servisní konzole

Sdílené soubory
Team assistant (opens in a new tab)

Powered by HelpDocs (opens in a new tab)