Olet tässä:
Ristiinvahvistus-välilehti numeroiden käyttämiseen
Einstein Discovery käyttää k-kertaista ristiinvalidointia testatakseen mallin kykyä tehdä ennusteita, eli prosessia, joka vähentää mallin vahvistuksessa näytteen vinoumia. Tämä välilehti näyttää yhteenvedon tämän mallin ristiinvalidointiprosessin tuloksista sekä lisätietoja sen perustana olevista laskutoimista.
Ristiinvahvistus-välilehteen siirtyminen
Napsauta Suorituskyky-osiosta Mallin arviointi ja valitse Ristiintarkastus.
Ristiinvahvistus-välilehden sarakkeet
| Sarakkeen nimi | Kuvaus |
|---|---|
| Mittataulukon nimi | Tilaston nimi. |
| Koulutusjoukko | Tilastot CRM Analytics -datajoukon observaatioiden joukolle, jota Einstein Discovery käyttää mallin koulutukseen. |
| Vahvistusjoukko | Tilastot CRM Analytics -datajoukon observaatioiden joukolle, jota Einstein Discovery käyttää vahvistaakseen koulutetun mallin luomat ennusteet. |
| Ositus #1 | Testien ensimmäisen suorituskerran tilastot. |
| Ositus #2 | Testien toisen suorituskerran tilastot. |
| Ositus #3 | Testien kolmannen suorituskerran tilastot. |
| Ositus #4 | Testien neljännen suorituskerran tilastot. |
Ristiinvahvistus-välilehden tilastot
Ristiinvahvistus-välilehdessä näytetään seuraavat mallia koskevat tilastot.
| Mittataulukon nimi | Kuvaus |
|---|---|
| Rivien määrä | Observaatioiden kokonaismäärä. Arvon tarkoitus vaihtelee sarakkeen mukaan.
|
R2 |
R2 mittaa mallin kykyä selittää lopputuloksen variaatiota, mikä osoittaa, miten ennakoiva malli on. Arvoalue:
|
| MSE | Jäännösvarianssi. Mittaa mallin ennusteiden poikkeamien keskiarvoa. MSE laskee havaitun (todellisen) lopputuloksen ja ennustettujen arvojen välisen eron potenssiin kaksi ja laskee niiden keskiarvon. |
| RMSE | Keskineliövirheen neliöjuuri Edustaa virheiden neliöllisen keskiarvon neliöjuurta. RMSE mittaa mallin ennustamien arvojen ja havaittujen (todellisten) arvojen eron. Voit ajatella tämän arvon olevan ”virheiden keskihajonta”. |
| MAE | Keskipoikkeama. Mittaa todellisen ja ennustetun arvon absoluuttisen poikkeaman. Tässä keskiarvossa kaikkia poikkeamia painotetaan yhtä paljon, mikä tarkoittaa, että poikkeavat arvot eivät vaikuta siihen yhtä vahvasti kuin jäännösvarianssiin (MSE). |
| RMSLE | Neliöllisen keskiarvon logaritminen virhe. Verrattaessa RMSE-lukemaan:
|
| Jäännösdevianssi | Mittaa, kuinka hyvin kehitetty malli toimii datajoukollesi.
|
| Keskiarvoinen jäännösdevianssi | Mittaa, kuinka hyvin malli toimii datajoukollesi. Pienemmät arvot tarkoittavat parempaa sovitetta. |
| Null-devianssi | Mittaa, miten hyvin yksinkertainen malli toimii datajoukollesi. Alhaisemmat arvot tarkoittavat parempaa sovitusta. Jos siis null-devianssi on alhainen, datasi ei ole kovin monimutkaista. |
| Null-vapausaste | Osoittaa null-devianssin khii toiseen -jakaumat. |
| Jäännösvapausaste | Osoittaa jäännösdevianssin khii toiseen -jakaumat. |
Mallin validoinnin metodologia
Einstein Discovery suorittaa mallillesi k-kertaisen ristiinvalidoinnin (k=4). Tämä prosessi kattaa seuraavat vaiheet:
- CRM Analytics -datajoukon kaikki observaatiot jaetaan satunnaisesti neljään erilliseen yhtä suureen osioon.
- Suoritetaan neljä testiä (fold), joissa kolme osiota toimivat koulutusjoukkona ja yksi osio toimii testijoukkona.Huomautus Kun testit on suoritettu neljä kertaa, jokainen osio on toiminut kerran vahvistusjoukkona ja kolme kertaa osana koulutusjoukkoa.
- Mallin tilastot kerätään yhteen jokaiselta suorituskerralta.
- Neljän testikerran keskiarvo kerätään kokonaispisteitä varten.

