Bygg och testa observerbarhetsverktyg
Bygg- och testverktyg låter dig observera agenters beteende under utveckling, innan produktionstrafik finns. Tester i Agentforce Builder låter dig snabbt upprepa individuella konversationer, medan Testcenter automatiserar tester i stor skala.
Versioner som krävs
| Tillgängliga i: Lightning Experience |
| Tillgängliga i: Utgåvorna Enterprise, Performance, Unlimited och Developer. Obligatoriska tilläggslicenser varierar beroende på agenttyp. |
Bygg- och testverktyg låter dig observera agenters beteende under utveckling, innan produktionstrafik finns. Tester i Byggaren låter dig snabbt upprepa individuella konversationer, medan Testcenter automatiserar tester i stor skala och över en rad inmatningar.
Agentforce Builder
Agentforce Builder är platsen där du utvecklar och upprepar din agent innan den är redo för bredare tester eller distribution. Förhandsvisning låter dig köra testkonversationer i realtid och se exakt hur agenten svarar. Du kan förhandsgranska konversationer i simulerat läge eller livetestläge:
- Simulerar grundläggande agenters konversationsbeteende utan att skriva eller ändra data. Använd detta för att validera snabbjusteringar utan att röra liveposter.
- Livetest utför åtgärder mot riktiga data från början till slut. Använd detta när du behöver bekräfta att åtgärder aktiveras korrekt och poster uppdateras som förväntat. Detta läge ger dig den mest fullständiga bilden av din agents faktiska beteende.
För varje förhandsvisningskonversation ger Byggaren dig flera verktyg för att undersöka vad som hände. Resultaten är sessionsnivå och omedelbara, inklusive dirigering av underagenter, åtgärdsutförande och svarskvalitet för konversationen som testas. Börja med interaktionssammanfattningen och gå sedan djupare in efter behov.
Sammanfattning av interaktioner
Utgångspunkten för alla förhandsgranskningar. Tillgängligt för varje konversationsomgång under konversationen — du behöver inte vänta tills den är färdig. Den ger en översikt på hög nivå av de steg din agent tog för att skapa ett svar, inklusive resultatet av båda. Håll markören över ett steg för mer information. Den innehåller även en AI-genererad förklaring av din agents process, vilket hjälper till att sätta stegen i sitt sammanhang. Om du inte är säker på vad ett resultat innebär kan Agentforce förklara din agents beteende, föreslå nästa steg eller göra agentfixar. Om något ser fel ut här går fliken Spårning in på mer detaljer.
Fliken Spåra
Visar fullständiga spårningsdata för det steget, inklusive varje agenthändelse, tid som gått och tekniska detaljer. Fördjupa dig i en agenthändelse för att öppna en JSON-vy av agentens fullständiga LLM-uppmaning, inklusive systemuppmaningar.
För att förhandsgranska och testa din agent i Agentforce Builder, se Agentforce Builder-test.
Testcenter och betygsättare
Testcenter är platsen där fördistribueringssidan av observerbarhetsloopen tar form. Det är här du bekräftar att din agent presterar i stor skala innan kunder är involverade, etablerar de baslinjer för kvalitet och prestanda som du jämför produktionssignaler mot, och definierar de betygsättare som förs vidare till Analytics efter distribuering, vilket sluter loopen mellan datasignaler före och efter distribuering.
I Testcenter kan du testa underagentbeteende, åtgärdsutförande, Knowledge hämtning, uppmaningsmallar och egna kriterier som är specifika för dina krav. Testresultaten lyfter fram svarskvalitet, korrekthet för underagenter och åtgärder, instruktionsefterlevnad och latens, alla fördistribuerade, per testfall.
Betygare
Poängsättare är de utvärderingskriterier som Testcenter använder för att bedöma agentresultat. Många mappar direkt till de mått du bevakar i Agent Analytics, och egna betygsättningskonfigurationer förs vidare som nyckeltal för produktion efter distribuering.
| Nivå | Poängsättare | Vad den utvärderar |
|---|---|---|
| Standard | Svarsbetyg, Underagentkontroll, Åtgärdskontroll | Om rätt underagent valdes, rätt åtgärd utlöstes och svaret var acceptabelt. |
| Kvalitet | Fullständighet, Sammanhang, Koncishet, Latens, Instruktionsefterlevnad | Hur bra svaret var, inte bara om det gick igenom. Dessa inkluderar enhetlighet, fullständighet, koncishet, latens och instruktionsefterlevnad som separata dimensioner. |
| Egen | Kriterier din distribuering kräver att standardbetyg inte kan täcka in som varumärkesröst, domänprecision, ton eller användningsspecifik efterlevnad. | |
| Användardefinierade etiketter | Returnerar ett värde från en lista som du definierar. Använd för klassificering, utdata i stil med enum eller efterlevnadsetiketter som till exempel godkännande/misslyckande för varumärkesröst, godkända svarskategorier och liknande. | |
| Användardefinierad öppen | Returnerar obegränsad utdata, text, ett nummer, en URL. Använd när du behöver rikare eller utforskande resultat som en fast lista inte kan samla in. | |
| Uppmaningsmall | Sammanhang, Korthet, Fullständighet, Fakta, Instruktionsföljning, Svarsmatchning | Utdatakvalitet för snabba malltestkörningar, inklusive fakta, svarsmatchning och standardkvalitetsdimensioner som tillämpas på mallutdata. |
För att konfigurera och köra tester i Testcenter, se Konfigurera och kör tester i Agentforce Studio (beta).
