Wenn ich einen trainierten binären Klassifikator habe, wie groß ist dann die Wahrscheinlichkeit, zufällig eine richtige Vorhersage zu treffen?ML Binary Classifier - Wahrscheinlichkeit, zufällig Ergebnisse zu erhalten
Zum Beispiel sagen wir, dass ich 5 Vorhersagen machen möchte. Wie groß ist die Wahrscheinlichkeit, alle 5 Vorhersagen zufällig zu erhalten?
Ist es: 0,5 * 0,5 * 0,5 * 0,5 * 0,5 = 0,0313?
Sie haben jedoch Recht, unter der Annahme, dass Klassen gleich wahrscheinlich sind. Wenn Sie ein ähnliches Modell mit 99% Genauigkeit haben (was bedeutet, dass für jedes zufällig ausgewählte Sample 99% der Zeit korrektes Label angegeben wird), hat es auch keine hohe Wahrscheinlichkeit alle Proben korrekt. Bei 100 Proben sind es nur etwa 36% und bei 300 weniger als 5% ... bei 1000 sind es 0,004%.
Im Allgemeinen wird die Wahrscheinlichkeit, dass viele Ereignisse nacheinander auftreten, sehr schnell (exponentiell) fallen, wenn die Wahrscheinlichkeit für jeden Erfolg konstant ist.
Wenn die Klassen gleich wahrscheinlich sind, dann ja. Wenn eine Klasse wahrscheinlicher (gemeinsam) ist, dann hängt es davon ab, wie Sie "raten", aber die allgemeine Eigenschaft ist die gleiche - diese Wahrscheinlichkeit wird extrem klein sein. – lejlot