Die Faustregel: Der ehrlichste Gegner für eine KI

Das Problem mit nackten Trefferquoten

Angenommen, ein KI-Modell trifft in 55 Prozent der Fälle die richtige Tendenz. Ist das gut? Die Frage lässt sich ohne Vergleichspunkt nicht beantworten. Im Fußball gibt es drei mögliche Ausgänge, aber sie sind nicht gleich wahrscheinlich – Heimsiege sind häufiger als Auswärtssiege, und der Tabellenplatz sagt einiges über die Kräfteverhältnisse aus.

Eine Trefferquote von 55 Prozent könnte also eine beachtliche Leistung sein – oder schlechter als das, was jeder Zuschauer ohne nachzudenken hinbekommt. Ohne Nulllinie ist die Zahl bedeutungslos.

Wie die Faustregel funktioniert

Die Regel ist bewusst primitiv gehalten:

• Sie schaut auf die Tabelle und bestimmt, welche Mannschaft besser platziert ist.
• Sie tippt auf einen 1:0-Sieg dieser Mannschaft.
• Sie tut das bei jedem Spiel, ohne Ausnahme.

Sie berücksichtigt keine Form, keine Ausfälle, keinen Heimvorteil, keine direkten Vergleiche. Sie kennt keine Zweikampfstatistik und hat noch nie ein Spiel gesehen. Genau das macht sie als Maßstab so brauchbar: Alles, was ein KI-Modell besser macht als die Faustregel, ist der Anteil, den Analyse tatsächlich beiträgt.

Warum sie keinen Index bekommt

In der Modell-Tabelle steht bei der Faustregel „kein Index“. Das hat einen sachlichen Grund: Der Modell-Index setzt sich zu je einem Viertel aus Kalibrierung und Begründungsqualität zusammen – und die Faustregel liefert weder das eine noch das andere.

Ihr einen Index zuzuweisen hieße, zwei Drittel davon zu erfinden. Deshalb erscheint sie in der Tabelle mit ihren Punkten und ihrer Trefferquote, aber ohne Gesamtwertung – als Bezugslinie, nicht als Wettbewerber.

Was passiert, wenn die Faustregel gewinnt

Es kommt vor, dass die Faustregel einzelne KI-Modelle bei der Trefferquote schlägt. Das ist kein Fehler im System, sondern genau die Information, für die sie da ist. Sie bedeutet: In diesem Zeitraum hat die Analyse der Modelle keinen Mehrwert gegenüber dem bloßen Blick auf die Tabelle gebracht.

Dafür gibt es plausible Gründe. Der Tabellenplatz ist ein stark verdichteter Wert – er enthält bereits Form, Torverhältnis und Kaderqualität der bisherigen Saison. Ein Sprachmodell, das zusätzlich Formkurven und direkte Vergleiche gewichtet, kann sich dadurch auch verschlechtern, etwa wenn es einzelne jüngere Ergebnisse überbewertet.

Was die Faustregel nicht kann

Sie tippt strukturell nie auf ein Unentschieden und nie auf einen Außenseitersieg. Damit verliert sie in zwei Kategorien systematisch: bei Remis-Spielen und bei Überraschungen. Genau dort liegt die Chance für die KI-Modelle – und genau dort setzt auch der Schwierigkeitsmultiplikator an, der erkannte Außenseitersiege deutlich höher bewertet als bestätigte Favoritensiege.

Ein Modell, das die Faustregel nur bei der Trefferquote einholt, hat nichts gewonnen. Interessant wird es, wenn es sie bei den Punkten schlägt – denn dort zählt, ob es die schwierigen Spiele erkannt hat.

Warum das offen gezeigt wird

Es wäre einfach, die Faustregel wegzulassen. Dann stünden vier KI-Modelle mit ihren Trefferquoten da, und niemand könnte beurteilen, ob diese Quoten etwas wert sind. Genau so präsentieren sich die meisten Prognoseangebote.

Diese Seite zeigt den Vergleich, auch wenn er für die Modelle unangenehm ausfällt. Ein Prognosedienst, der seinen eigenen Mehrwert nicht misst, verlangt Vertrauen ohne Beleg.