Pisteyttimet ja mukautetut pisteyttimet (beta)

Missä pisteyttimet näytetään optimoinnissa ja Analyticsissa

• Next Gen Testing — Luo mukautettuja pisteyttäjiä osana uutta tai olemassa olevaa testisarjaa, hienosäätää ja julkaista se.
• Pisteytyshubi (Agentforce Studio) — Keskuspaikka, josta voit tarkastella, aktivoida ja hallita pisteyttäjiä.
• Istunnot- ja Tarkoitukset-taulukko — Istunnot näyttävät pisteyttäjien tulokset, suodattavat ja analysoivat niitä pisteyttäjien mukautettujen ulottuvuuksien perusteella.
• Istunto-sivu — Istunnot näyttävät niihin liittyvät pisteiden otsikot ja pisteet.
• Analyticsin mittaristot — Mukautetut pisteytysmittarit näytetään mittareina raporteissa.

Huomioitavat asiat ja rajoitukset

• Saatavilla Lightning Experiencessa Enterprise Edition-, Performance Edition- ja Unlimited Edition -versioissa Salesforce Foundations- tai Agentforce 1 Edition -versioissa, joissa agenttien optimointi ja Analytics ovat käytössä.
• Mukautetut pisteyttimet ovat beta-versioissa eikä ne vaadi Agentforcen ulkopuolista lisälisenssiä.
• Beta-version aikana tuetaan vain istuntotason pisteyttäjiä.
• Mukautettuja pisteyttäjiä ei tueta Agentforce Employee Agent (AEA) -agenttityypeille.
• SDR-agenttityyppi näytetään pisteytyshubissa, mutta ei Optimization UI -agenttien alasvetovalikossa.
• Vakio-pisteyttimet (A&D, laatupisteet) luodaan, kun STDM provisioidaan. Jos ne puuttuvat, tarkasta provisiointiongelma.
• Sinun täytyy kloonata vakiomuotoinen pisteytin ennen sen muokkaamista. Suoraa muokkausta ei tueta beta-version aikana.
• Lausekkeisiin perustuvat pisteyttimet vaativat Totuusarvo-tyypin.
• Numeerisia pisteitä 0–1-asteikolla ei suositella, koska LLM:t pärjäävät huonosti hyvin kapeilla numeroalueilla.
• Mukautetut pisteyttäjät eivät pisteytä testikeskuksen istuntoja. Testauskeskuksen istunnot eivät saa päättymisajankohtaa, joten datatoimintoa, joka käynnistää mukautetun pisteyttimen arvioinnin, ei koskaan käynnistetä.

Yleiskatsaus

Pisteyttimet arvioivat agentti-istunnot ja luovat pisteitä, ulottuvuuksia (tekstiarvoja) ja mittoja (numeerisia arvoja). Ne ovat osa Agentforce Optimization and Observability -ominaisuutta. Ne suoritetaan automaattisesti Optimizationissa ja Analyticsissa määritettävän istuntojen prosenttiosuuden ja tulosten perusteella, jotta pääkäyttäjät ja kehittäjät voivat parantaa agenttien suorituskykyä jatkuvasti.

Pisteitä on kahta tyyppiä:

• Salesforce tarjoaa käyttövalmiita vakiopisteitä.
• Organisaatiosi määrittää mukautettuja pisteyttäjiä arvioidakseen liiketoimintakohtaisia ehtoja.

Vakiopisteyttimet

Vakiopisteyttimet ovat käyttövalmiita arviointeja, jotka luodaan automaattisesti STDM-provisioinnin avulla. Ne suoritetaan agentti-istunnoissa ilman lisäasiakaskokoonpanoja.

Nykyiset vakiopisteet

• Peruutuksen pisteet — Osoittaa, lopettiko asiakas istunnon ennenaikaisesti ennen kuin agentti ratkaisi ongelmansa.
• Välityspisteet — Osoittaa, esttikö agentti onnistuneesti vuorovaikutuksen, joka vaatii ihmisen eskaloinnin.
• Laadun pisteet — Mittaa istunnon kokonaislaatua Salesforcen esimääritettyjen ehtojen perusteella.

Vakiopisteyttimet käyttävät käyttöliittymässä varattuja sijainteja, jotka on erotettu mukautetusta pisteytysluettelosta.

Tärkeää

Et voi muokata vakiomuotoista pisteytintä suoraan. Kloonaa se luodaksesi uuden mukautetun version, jossa on muokattu logiikkaa.

Mukautetut pisteyttimet

Mukautetut pisteyttimet sallivat sinun määrittää arviointilogiikkaa ja soveltaa sitä istuntoihin. He käyttävät LLM-metodia tuomarina (kehotteisiin perustuva arviointi) tai lausekkeisiin perustuvaa logiikkaa otsikoidakseen, pisteyttääkseen tai luokitellakseen istunnot ehtojesi mukaisesti.

Huomautus

Luot mukautettuja pisteyttäjiä Next Gen Testing (NGT) -ominaisuudessa Agentforce Studiossa. Lisätietoja on kohdassa Testausten määrittäminen ja suorittaminen Agentforce Studiossa (beta). Lisätietoja on kohdassa Seuraavan sukupolven testaaminen Slackillä.

Mukautetut pisteyttimet suoritetaan istuntoja vasten ja näyttävät mukautettuja pisteitä ja ulottuvuuksia Observability-ominaisuudessa.

Miten mukautetut pisteyttimet toimivat

Mukautettua pisteytintä tukee kehotteiden malli, joka suoritetaan automaattisesti erätyönä istunnon päättyessä. Kun pisteytin suoritetaan istunnolle, istunto liitetään siihen, ja otsikot ja pisteet näytetään Optimizationissa ja Analyticsissa.

• Pisteytin on kehotteiden malli, joka suoritetaan määritettävälle istuntojen prosenttiosuudelle (esimerkkisuhde).
• Pisteet näytetään istunnon lopussa, ei live-keskustelun aikana. Istuntojen täytyy saada pisteytysdatatoiminnon käynnistämisen päättymisajan aikaleima.
• Tulokset näytetään Observability-osiossa mukautettuina mittoina.
• Voit myös käynnistää pisteitäjiä manuaalisesti käyttämällä kutsuttavaa executeAgentforceScoresJob-toimintoa.
• Pisteyttimet eivät vaikuta agentin viiveeseen tai suorituskykyyn live-keskusteluiden aikana, koska pisteytys suoritetaan istunnon jälkeen.

Pisteytysikkunan kokoonpano

Avainkentät

Vahvistussäännöt

• scorerApiName ei voi olla jo olemassa.
• promptTemplateRef täytyy olla olemassa ja aktiivinen.
• Teksti-datatyypille: pisteyttäjien arvojen täytyy olla olemassa; tarkalleen yhdellä arvolla täytyy olla isFallback: true; tarkalleen yhdellä täytyy olla isSystemFallback: true (vain kun myös isFallback on tosi).
• Numeerinen-datatyypille: ei vara-arvoja, arvot täytyy jäsentää kelvollisina kaksinkertaisina. Jos käytät valuesSpecification: step on oltava suurempi kuin 0; min on oltava pienempi kuin max; threshold on valinnainen, mutta sen täytyy olla min ja max välillä.
• Pisteytysarvojen enimmäismäärä: 101.

Tulostyypit

• Teksti (otsikot) — Pisteytin kohdistaa jokaiselle istunnolle yhden esimääritettyjen merkkijonojen otsikoista (esimerkiksi Ratkaistu, Hylätty tai Eskaloitu). Käytä kategorista luokittelua varten.
• Numeerinen — Pisteytin palauttaa määritetyn asteikon numeron (esimerkiksi 0–5). Soveltuu laatuarvoille ja jatkuville pisteille. LLM:t suoriutuvat tavallisesti paremmin erillisillä asteikoilla (kuten 0–5) kuin kapeilla 0–1-asteikoilla.
• Totuusarvo (stretch tai future) — Palauttaa arvon true tai false. Tuetaan lausekkeisiin perustuville pisteyttimille.

Pisteyttimien suorittaminen tuotantoympäristössä

Aktivoi pisteytysvälilehdestä

Kun olet luonut ja testannut mukautettua pisteytintä, aktivoi se Agentforce Optimization Scorer Hubista. Aktivointi sallii pisteyttävän suorittaa live-istunnot määritetyllä näytesuhteella.

Suorita Salesforce-kulusta

Tarjoamme uuden kutsuttavan toiminnon TriggerAgentBulkScoring suorittaaksemme mukautettuja pisteitä asynkronisesti historiallisille istunnoille. Tämä toiminto hyväksyy useita istuntoja ja pisteyttäjiä, ja se on käytettävissä seuraavista kohteista:

• Salesforce-kulku
• REST API
• Apex

Toiminnon nimi: TriggerAgentBulkScoring

Tärkeät huomautukset

• Kaikkien istuntotunnusten ja scorerApiNames täytyy kuulua samalle agentille.
• Varmista, että pisteytysversio on Käytettävissä ennen suoritusta.

REST API

Lähetä POST-pyyntö vakiotoiminnon REST-päätepisteeseen.

/services/data/v66.0/actions/standard/triggerAgentBulkScoring

Esimerkki tietosisällöstä:

{
  "inputs": [
    {
      "inputIds": ["019c9442-b760-7d62-837c-8ab80ecc0fc2"],
      "inputScope": "Session",
      "scorerApiNames": ["language_classifier"]
    }
  ]
}

Käytä kutsuttavaa executeAgentforceScoresJob-toimintoa kulussa. Toiminto hyväksyy istuntotunnusten ja pisteyttimien luettelon ja lähettää työn arviointiputkelle. Yleisiin käyttötarkoituksiin sisältyy:

• Historiallisten istuntojen pisteytysikkunoiden suorittaminen
• Eräanalyysi ja mukautettu raportointi
• Integraatio Agentforce

Metadata API

Luo ja hallitse mukautettuja pisteitäjiä Salesforce Metadata API:lla, jotta voit ottaa pisteitäjiä käyttöön koodin ja DevOps-työnkuluissa, mukaan lukien CI/CD-putket.

Käyttötarkoitukset