Agentforcen havaintojen KPI-mittareiden ja -työkalujen ymmärtäminen
Havaittavuus ei ole yksittäinen työkalu. Se on kerroksittainen työkaluketju, joka sisältää infrastruktuurin, joka kerää agenttien toiminnan, kehitystyökalut, joilla voit testata agenttiasi ennen käyttöönottoa, sekä valvontatyökalut, jotka näyttävät trendejä ja istuntotason lisätietoja käyttöönoton jälkeen.
Vaaditut versiot
| Käytettävissä: Lightning Experiencessa |
| Käytettävissä: Enterprise Edition-, Performance Edition-, Unlimited Edition- ja Developer Edition -versioissa. Pakolliset lisäosalisenssit vaihtelevat agentin tyypin mukaan. |
Tietäminen, mikä kerros toimii, mikä pitää agenttisi näkyvissä rakentamisen aikana tuotantoympäristössä. Tämä artikkeli kartoittaa koko työkaluketjun ja jokainen osio sisältää linkkejä lisätietoihin.
Infrastruktuuri
Ennen kuin jokin havaintojen työkalu voi näyttää tai käsitellä dataa, se tarvitsee sen perustana olevan agenttien telemetrian infrastruktuurin. Ota nämä työkalut käyttöön, jotta muualla työkaluketjussa on työstettäviä tietoja.
| Työkalu | Missä se näytetään | Kuvaus |
|---|---|---|
| Agentforce-istuntojen jäljittäminen | Määritykset → Agentforce → Agentforce jäljittäminen | Tallentaa kunkin agentti-istunnon jokaisen vuoron, päättelyvaiheen, toiminnon ja viestin. Tämän täytyy olla käytössä ennen kuin muilla observaatiotyökaluilla on dataa. |
| Agentin sovellusalustan jäljitysoikeus | Määritykset → Pikahaku → Einstein Generative AI → Einstein Audit, Analytics ja Monitoring Määritykset → Agent Platform Tracking -vaihtokytkin | Sieppaa palvelutason telemetriaa Atlasin järkeilyjärjestelmästä, Apexista, kuluista, Kehotteiden rakentajasta, kutsuttavista toiminnoista, tekoälyyhdyskäytävästä, LLM-yhdyskäytävästä ja DC-kyselyiden yhdistelmästä. |
| Tarkastus ja palaute | Määritykset → Pikahaku → Einsteinin auditointi → Einsteinin auditointi, Analytics ja valvonta Määritykset | Sieppaa LLM-syötteet/lähtötiedot, noudon laadun datan, Trust arviointien, suojamerkkien tulokset ja käyttäjien palautteen signaalit. Vahvistaa Agent Analyticsin laatupisteet ja Trust. |
| Knowledge/RAG:n laatudata ja tilastot | Määritykset → Pikahaku → Einstein auditointi → Einstein auditointi, Analytics ja valvonta Määritykset → Knowledge data ja tilastot | Pisteyttää haun laadun, kuten Vastauksen uskollisuus, Vastauksen relevanttius, Kontekstin relevanttius, käsitelty Auditointi- ja Palautteen myyntiputken kautta. Tehostaa laatupisteiden noutotilastoja. |
| Trust-kerros | Määritykset → Pikahaku → Einstein → Einstein Trust Layer | Pisteyttää ohjeiden noudattamisen ja toksisuuden, jotka saadaan LLM Gateway -toiminnon tuloksista, jotka käsitellään Audit and Feedback -putken kautta. Vahvistaa Agent Analyticsin Trust. |
Keskity näihin työkaluihin tarkemmin Agentforce Observability Infrastructure -ominaisuudessa.
Rakentaminen ja testaaminen
Rakennus- ja testaustyökalut sallivat sinun tarkkailla agenttien toimintatapaa kehityksen aikana ennen kuin tuotantoympäristössä on liikennettä.
| Työkalu | Missä se näytetään | Kuvaus |
|---|---|---|
| Agentforce Builder | Agentforce Studio → Rakentaja | Ensisijainen työtila iteratiivisten agenttien kehittämiseen ja testaamiseen. Suorita keskusteluita simulointitilassa kirjoittamatta dataa tai Live-tilaa verrattaessa todelliseen dataan. |
| Interaction Summary | Agentforce Studio → Builder → Esikatselu-paneeli | Näyttää alitason agentin valinnan, toiminnon suorituksen ja testikeskustelun perustelun. Tarkenna mitä tahansa kohdetta, jotta voit ajoittaa ja siirtyä alitason agenteille vaiheittain. |
| Testikeskus | Agentforce Studio → Agentforce-testauskeskus | Knowledgen noutamisen, alaagentin ja toiminnon valinnan ja tehtävien ratkaisun eräarviointi ennen käyttöönottoa. Luo ja pisteyttää testisarjan lausumia käyttämällä oletusarvoisia, laadukkaita ja mukautettuja pisteitä. Mukautetut pisteyttimet näytetään Agent Analyticsissa käyttöönoton jälkeen. |
Keskity näihin työkaluihin tarkemmin kohdassa Observaation työkalujen laatiminen ja testaaminen.
Huomioi
Kun agenttisi on otettu käyttöön, Observe-vaiheen työkalut seuraavat trendejä kaikissa istunnoissa, jotta voit tutkia tiettyjä keskusteluita ja keskittyä vaiheiden lisätietoihin.
| Työkalu | Missä se näytetään | Kuvaus |
|---|---|---|
| Agent Analytics | Agentforce Studio → Observe and Optimize → Analytics | Aggregoi suorituskykytiedot kaikista istunnoista ja näyttää trendit lopputuloksen alueen mukaan Tableau Next -mittaristoissa. Välilehdet vaihtelevat agenttityypin mukaan ja kattavat tehokkuuden, käytön, laadun, terveyden, Trustin ja äänen. |
| Agenttien optimointi | Agentforce Studio → Observe and Optimize → Optimization | Yksittäinen istuntonäkymä, joka on suodatettu tarkoituksen, lopputuloksen ja laatupisteiden perusteella. Käsitellyt istunnot sisältävät tarkoitusten klusteroinnin ja laatupisteet. Käsittelemättömät istunnot ovat käytettävissä välittömästi. |
| Interaction Summary | Agentforce Studio → Observe & Optimize → Optimization-istunnon lisätiedot | Valitun tarkoituksen rakenteellinen erittely, joka näyttää käynnistetyt alitason agentit, käynnistetyt toiminnot, laatupisteet ja LLM:n luoman laatupisteiden perustelu. |
| Seuraa | Agentforce Studio → Observe & Optimize → Optimization-istunnon lisätiedot | Käsittelyn jokaisen vaiheen ajankohtainen tietue, joka sisältää vaihekohtaisen ajoituksen ja virheviestin. Saatavilla välittömästi, mukaan lukien käsiteltävissä oleville istunnoille. |
| Agentin kunto | Agentforce Studio → Hälytykset | Luo hälytyksiä ja määritä kynnysarvoja, jotta saat ilmoituksen, kun agenttien toiminnot rikkovat hyväksyttävät tasot. |
| Agentin suojakalvot | Agentforce Studio → Tarkastele ja optimoi | Erillinen näkymä ohjeiden noudattamisesta ja tehtävien ratkaisemisen trendeistä, erillään laajemmasta Analytics-näkymästä. |
| Valvoa Voicea käyttävää agenttiasi | Agentforce Omni Supervisorissa (Service Cloud -konsoli) | Lähes reaaliaikainen valvojan näkymä aktiivisista äänipuheluista live-keskustelulokeilla. |
| Data 360 -kyselyeditori | Data 360 → Pyynnöt | Suora SQL-käyttöoikeus kaikkiin neljään perustana olevaan datakerrokseen mukautetuille aggregoinneille, ristiobjektien liitoksille ja analyyseille, joita tuotekäyttöliittymä ei näytä. |
Keskity näihin työkaluihin tarkemmin kohdasta Observe Phase Observability Tools.
Työkaluketju toimii parhaiten järjestyksessä. Aloita infrastruktuurilla varmistaaksesi, että data kulkee, käytä Laadi ja testaa -toimintoa havaitaksesi ongelmia ennen käyttöönottoa ja käytä Observe-toimintoa suorituskyvyn seuraamiseen ja tutkimiseen käyttöönoton jälkeen.
