breadcrumbDescription
Promptkonstruktør og Feedback-metrikkontrol
Overvåger ibrugtagningen og kvaliteten af specifikke Einstein ved at spore genereringsantal og brugerindsendt feedback.
Kontrolnavn
Promptkonstruktørog feedbackmetrikker
Kontroller oversigt
Overvåger ibrugtagningen og kvaliteten af specifikke Einstein ved at spore genereringsantal og brugerindsendt feedback.
Beskrivelse
Aktiverer registreringen af skabelonspecifikke ydeevnedata. Dette inkluderer, hvor ofte en skabelon udløses og de tilknyttede feedbackårsager.
Anbefalet konfiguration
Skriv Einstein i feltet Find hurtigt i Opsætning, og vælg derefter "Opsætning af Einstein, Analytics og overvågning". Aktiver "Promptkonstruktør - anvendelses- og feedbackmetrikker". Tildel tilladelsen "Meddelelsesskabelonadministrator" til administratorer for at gennemse disse metrikker.
Sikkerhedspåvirkning
Identificerer variation i AI-ydeevne, hvor meddelelsesskabeloner kan begynde at oprette svar af lavere kvalitet eller risikable svar på grund af ændringer i underliggende CRM-data.
Forretningspåvirkning
Aktiverer en datastyret ROI-analyse af genererende AI ved at vise, hvilke afdelinger der faktisk bruger værktøjerne, og hvilke skabeloner der kræver tekniske forbedringer for at være nyttige.
Sikkerhedsrisiko, hvis den ikke er konfigureret
Firmaer forbliver uvidende om effektiviteten af deres meddelelser. Lavkvalitets eller vildledende AI-svar kan bruges af medarbejdere uden en formel feedbackforløb til korrektion.
Trusselscenarier
Ubemærkede hallucinationer: En skabelon genererer konsekvent ukorrekte data, men da metrikker er deaktiveret, er administratorer uvidende om, at brugere manuelt retter (eller ignorerer) AI.
Estimeret CVSS-scoringsinterval
Kritisk (9,0-10,0).
Overvejelser i forbindelse med risikopåvirkning
Høj påvirkning for firmaer, der skalerer AI på tværs af store teams, hvor manuel spotkontrol af AI-interaktioner ikke længere er mulig. Med højere anvendelse bliver implementering af regelmæssig overvågning af disse logfiler et vigtigt trin for at resultere i den fulde fordel ved denne funktion.
Højere risiko når
Tilpassede gennemgang/feedbacktrin for meddelelserne er ikke konfigureret, hvilket efterlader administratorer med begrænsede data, men ingen kontekst for, hvorfor svaret mislykkedes.
Lav risiko når
Der er implementeret en proces til regelmæssigt at gennemse anvendelsesmetrikker for meddelelsesskabeloner, og skabeloner, der fungerer dårligt, justeres iterativt i en sandbox.
Overvejelser i forbindelse med forretning og integration
Lageromkostninger: Disse data forbruger Data Cloud-kreditter. Forsinkelse: Revisionsdata kan tage op til 24 timer at blive vist i rapporter.
Vejledning til sikkerhedstilstandsgennemgang
Sikkerhedstilstandscheck bekræfter "Aktiveret"-statussen for Promptkonstruktør og -feedbackmetrikker og markerer forekomster, hvor Meddelelsesskabelonanvendelsesmetrikker ikke logføres, hvilket forhindrer firmaet i at forbedre dets AI-sikkerhed.
Hvem er påvirket
Dataforvaltningsmedarbejdere, AI-administratorer, kundeservicemanagers og juridiske/overensstemmelsesrevisorer.
