A kiértékelést az általad beküldött adatokkal a ROC görbe AUC értékével valósítjuk meg, minél magasabb ez az érték, annál jobb a modelled.
Fontos értened a kaggle kiértékelési módszertanát is: az adott versenynél a beküldött 100.000 sornyi adatot megfelezi a Kaggle, majd mindkét felén kiértékeli azt az AUC függvény segítségével. A public leaderboard-on az első részen elért eredményt látod, ez egyfajta tájékoztató jellegű visszacsatolás. A versenyen (és a jegy meghatározásban) azonban nem ezzel az értékkel veszel részt, hanem a private leaderboard nevű listán kell jó eredményt elérned: ezt az adatok második felén számított AUC értéket jelenti. Ezt az életszerűség biztosítása végett sosem láthatod, egyedül a vizsgaalkalmad előtti nap 12 órájakor olvassuk mi le neked.