breadcrumbDescription
Test en Ensemble Retriever
Test en ensemble-vælgerkonfiguration i AI Models-vælgerens legeplads, før du bruger den i meddelelsesskabeloner eller AI-agenter. Tilføj eller fjern hentere til et ensemble, konfigurer testdata og resultatparametre for at bekræfte hentningslogikken.
EditionsHeading
| Tilgængelig i: Alle versioner understøttes af Data 360. Se tilgængelighed af Data 360-versionen. |
| Brugertilladelser påkrævet | |
|---|---|
| Hvis du vil administrere hentere eller versioner i AI-modeller (opret, rediger, test og slet) | Tillad brugere at administrere modeller i AI-modeller ELLER Data Cloud Architect-tilladelsessæt |
| Hvis du vil have adgang til data med hentere | For Knowledge skal du sørge for, at brugeren har læseadgang til objektet og har apptilladelsen: Tillad Vis Knowledge For alle andre standardobjekter skal du sørge for, at brugeren har læseadgang til objektet og relevante delingsregler. Hvis du ønsker yderligere oplysninger, kan du se Angiv dine interne delingsstandarder for hele organisationen. |
Related information html
Tilpas en Ensemble Retriever i eksperimenteringsområdet
-
I AI-modeller på fanen Hentere skal du vælge Test Retriever. Alternativt kan du vælge Test Retriever for en ensemble retriever fra handlingsrullemenuen.
Ensemble-vælgere, der indeholder Agentforce ADL-vælgere (Data Library) eller Custom SQL-vælgere, kan ikke testes i legepladsen.
- Vælg en tilstand til at teste henteren. I basistilstanden returnerer hentningsområdet et kildetilbagekaldelsesscore og en svartid. I den avancerede tilstand returnerer eksperimenteringsområdet en AI-genereret konteksttilbagekaldelsesscore baseret på et forventet svar på et testspørgsmål. Hvis du ønsker flere oplysninger om metrikker og omkostninger, kan du se Retriever Metrics and Results and Filling Considerations for Testing Retrievers.
-
Vælg en ensemble retriever, som du vil teste og validere.
Når du søger efter hentere, vises kun aktive hentere. Vælgerkonfigurationspanelet viser de individuelle vælgere, der er del af ensemblevælgeren.
- Hvis du vil tilpasse eller omkonfigurere ensemble retriever, skal du vælge Rediger.
-
Vælg eller fravælg hentere efter dataområde.
En ensemble retriever kan maksimalt indeholde 10 individuelle retrievers. Fanen Vælg Retriever viser de retrievers, der er en del af ensembleet.
-
Rediger antallet af resultater, som du ønsker, at henteren skal returnere.
Hvis resultaterne af en brugers spørgsmål ikke inkluderer det forventede svar, skal du øge antallet af returnerede resultater.
-
Tilpas de felter, der returneres af henteren, ved at tilføje eller fjerne eksisterende felter.
Bemærk Hentingen returnerer disse nye felter, når du gemmer konfigurationen og bruger den med agenter. - (Valgfrit) Aktiver indstillinger for citater for at få vist og validere citater fra individuelle hentere.
Test din Retriever
Konfigurer testdata, og angiv en naturlig sprogforespørgsel for at teste din retriever. Testdata er den ønskede kilde, hvorfra det korrekte svar forventes. Med ensemble retrievers kan de ønskede kilderegistreringer være del af forskellige retrievers. I eksperimenteringsområdet kan du vælge testdata fra hver individuel retriever, der er del af ensembleet.
- Hvis du vil teste dine hentningssvar fra forventede kilder, skal du vælge Konfigurer testdata.
- Vælg en retriever i vinduet Konfigurer testdata.
-
Vælg datamodelobjektet, hvis du ved, hvilke registreringer der indeholder svaret, eller vælg søgeordssøgning.
For hybrid søgeafhentere med nøgleordmatches skal du vælge testdata efter nøgleordssøgning eller datamodelobjektregistreringer. Ellers kan du kun vælge efter datamodelobjektregistreringer. Vælg datamodelobjektregistreringer, hvis du ved, hvilke registreringer der indeholder svaret på dit testspørgsmål. Vælg registreringer baseret på en nøgleordssøgning, hvis du ved, hvad dit svar skal indeholde, f.eks. for et spørgsmål, der er relateret til betalt fridag, kan du skrive "PTO eller fridag".
-
Gentag trin to og tre for hver hentning, der er del af ensembleet.
Du kan vælge op til fem testdataregistreringer for hver individuel hentning i ensembleet.
-
Stil et testspørgsmål. I den avancerede tilstand kan du teste dine hentningssvar baseret på et forventet svar på testspørgsmålet.
Når du har kørt din test, viser panelet Test Retriever antallet af dokumenter, der er hentet af retrieveren.
I panelet Resultater skal du gennemse overlapningen mellem de øverste segmenter, der returneres af henteren, og testdatastrukturerne. Bekræft gyldigheden af kilder med links til citationer for de hentede segmenter. Tilpas hentningskonfiguration med dine testdata for at få det optimale svar. Gem testede konfigurationer som nye versioner.
