Zum Inhalt
KI-BlogBriefing zu künstlicher Intelligenz

Lexikon · F

F1-Score

Kurzantwort

Der F1-Score fasst Präzision und Recall als harmonisches Mittel in einer Zahl zwischen 0 und 1 zusammen⁠1. Er fällt deutlich ab, sobald einer der beiden Werte schwach ist, und wird deshalb bei unausgewogenen Daten oft der Accuracy vorgezogen⁠2.

Autor
Veröffentlicht
Geprüft
Lesezeit
3 Minuten
Zwei Balken für Präzision 0,9 und Recall 0,1, dazu eine gestrichelte Linie beim Durchschnitt 0,5 und eine rote Linie beim F1-Score 0,18
Der Durchschnitt läge bei 0,5, das harmonische Mittel bei 0,18. Grafik: KI-Blog

Angenommen, ein Modell findet 90 Prozent aller gesuchten Fälle, aber nur jede zehnte seiner Meldungen stimmt. Der gewöhnliche Durchschnitt aus 0,9 und 0,1 ergibt 0,5 und klingt nach Mittelmaß. Der F1-Score liegt bei 0,18 und zeigt deutlicher, dass dieses Modell im Alltag kaum zu gebrauchen ist.

Wie sich der Wert berechnet

Grundlage sind die beiden Maße Präzision und Recall. Der F1-Score ist ihr harmonisches Mittel: zwei mal Präzision mal Recall, geteilt durch die Summe aus Präzision und Recall⁠3. Direkt aus den Zählwerten geht es ebenfalls, nämlich zweimal die richtig positiven Fälle, geteilt durch zweimal die richtig positiven plus die falsch positiven plus die falsch negativen⁠1. Die richtig negativen Fälle kommen in dieser Rechnung nicht vor. Andere Namen sind F-Maß oder F-Measure⁠1.

Mit dem Spamfilter aus dem Eintrag zu Präzision und Recall sieht die Rechnung so aus: 40 richtig erkannte Spams, 5 fälschlich aussortierte echte Mails und 10 durchgerutschte Spams. Zweimal 40 sind 80, geteilt durch 80 plus 5 plus 10 ergibt das rund 0,84. Die drei Zählwerte stammen aus den Feldern der Konfusionsmatrix; das vierte Feld, die richtig negativen Fälle, bleibt außen vor.

Warum das harmonische Mittel

Das harmonische Mittel liegt immer nahe am kleineren der beiden Werte. Ein glänzender Recall gleicht eine schwache Präzision deshalb kaum aus, und umgekehrt gilt dasselbe. Für den Vergleich mehrerer Modelle ist das praktisch, weil eine einzige Zahl beide Fehlerarten berücksichtigt. Google empfiehlt den F1-Score bei unausgewogenen Datensätzen gegenüber der Accuracy⁠2.

Präzision und Recall gehen gleich stark ein⁠1. Ist eine Fehlerart teurer, gibt es den allgemeineren F-Beta-Wert: Ein Beta über 1 gewichtet den Recall stärker, ein Beta unter 1 die Präzision⁠3. In scikit-learn hat er eine eigene Funktion.

Varianten bei mehreren Klassen

Bei mehreren Klassen wird der F1-Score je Klasse berechnet und dann gemittelt. Die Dokumentation von scikit-learn nennt dafür drei übliche Wege⁠1. "macro" bildet den einfachen Mittelwert und behandelt seltene Klassen wie häufige. "weighted" gewichtet nach der Zahl der echten Fälle je Klasse. "micro" zählt zuerst alle Treffer und Fehler über alle Klassen zusammen. Welche Variante in einem Bericht steht, verändert das Ergebnis spürbar: Im Beispiel der Dokumentation ergeben dieselben Vorhersagen 0,27 mit macro und 0,33 mit micro⁠1.

Was der Wert verschweigt

Eine einzelne Zahl verdeckt, welcher der beiden Werte schwach ist. Ein F1-Score von 0,6 kann aus zwei ausgeglichenen Werten entstehen oder aus einem guten Recall mit mäßiger Präzision. Für die Wahl der Schwelle im Einsatz brauchst du deshalb beide Einzelwerte. Peter Christen, David Hand und Nishadi Kirielle halten das Maß in einem 2023 online erschienenen Übersichtsartikel für theoretisch schwach begründet und kritisieren, dass es eine Klasse besonders betont⁠4. Entstanden ist es im Information Retrieval, also bei der Bewertung von Suchsystemen⁠4.

Häufige Fragen

Ist ein F1-Score von 0,8 gut?

Das hängt von der Aufgabe und vom Vergleichswert ab. Für einen Spamfilter kann 0,8 zu wenig sein, bei der Suche nach seltenen Fehlern in Maschinendaten ein ordentlicher Wert.

Warum fehlen die richtig negativen Fälle in der Formel?

Der F1-Score verwendet nur richtig positive, falsch positive und falsch negative Fälle⁠1. Zählen auch die korrekt abgewiesenen Fälle, ergänzt man ihn um andere Maße wie die Accuracy oder den Matthews-Korrelationskoeffizienten⁠3.

Was gilt, wenn es weder Treffer noch Fehler gibt?

Enthalten Daten und Vorhersagen nur negative Fälle, ist der F1-Score nicht definiert. scikit-learn setzt ihn dann standardmäßig auf 0 und gibt eine Warnung aus⁠1.

Quellen

Stand:

  1. scikit-learn: f1_score (Version 1.9.1), abgerufen am 22.11.2026. zurück
  2. Google for Developers: Machine Learning Crash Course: Classification, Accuracy, recall, precision, and related metrics, abgerufen am 22.11.2026. zurück
  3. scikit-learn: Metrics and scoring: quantifying the quality of predictions (Version 1.9.1), abgerufen am 22.11.2026. zurück
  4. ACM Computing Surveys (Christen, Hand, Kirielle): A review of the F-measure: its history, properties, criticism, and alternatives, Stand 03/2024, abgerufen am 22.11.2026. zurück

Weiterlesen

Bilder: KI-generiert

Aus dem Lexikon

Grafiken: KI-Blog