Statistische Betrachtungen zur Leistungsmessung an Klassifikatoren bei Gliederung des Testmaterials in Teilstichproben

Zusammenfassung

Es wird das Problem der Leistungsmessung von Erkennungssystemen speziell unter dem Gesichtspunkt betrachtet, daß die Teststichprobe in eine Vielzahl von Teilmengen aufgegliedert ist. Solch eine Aufteilung ist in den meisten Anwendungsaufgaben in natürlicher Weise gegeben (verschiedene Schreiber bzw. Sprecher, verschiedene Schriftarten).

Dazu wird eine statistische Modellierung eingeführt, bei der der zeichenerzeugende Prozeß einen Parameter erhält, der selber wieder eine zufällige Veränderliche ist. Die einzelnen Teilstichproben sind verschiedene Realisierungen dieser Zufallsvariablen. Unter den Hypothesen Einpunktverteilung bzw. Exponentialverteilung der Fehlerrate des zeichenerzeugenden Prozesses werden die Funktionen MFR(ANTEIL) bzw. RFR(ANTEIL) ausgewertet, die die mittlere Fehlerrate MFR bzw. die relative mittlere Fehlerrate RFR in dem verbleibenden Rest des Testmaterials angibt, wenn man bis auf den Rest ANTEIL alle schwierigeren Teilstichproben aus der Testmenge entfernt. Die theoretischen Kurvenverläufe werden mit einer real gemessenen Kurve bei einem Handblockschrifterkennungsproblem verglichen.