Precision

Precision bezeichnet eine Metrik der Retrieval-Evaluation, die den Anteil relevanter Treffer an allen gelieferten Treffern misst. Der Wert liegt zwischen 0 und 1, bei 1 ist jeder gelieferte Treffer relevant. Precision zeigt, wie genau ein Suchsystem trifft und wie viel Rauschen eine Ergebnisliste enthält.

Funktionsweise und Einordnung

Precision teilt die Zahl der relevanten Treffer durch die Zahl aller Treffer. Grundlage sind Relevanzurteile, die für jede Anfrage festlegen, welche Dokumente passen. Meist wird Precision mit einem Cut-off gemessen: Precision@10 wertet nur die ersten zehn Treffer aus.

Das Gegenstück ist Recall, der die Vollständigkeit misst. Beide Werte stehen im Zielkonflikt: Längere Ergebnislisten heben den Recall und senken die Precision. Precision berücksichtigt die Reihenfolge innerhalb der Liste nicht. Das leisten rangbasierte Metriken wie nDCG.

Wie Precision mit Recall, MRR und nDCG zusammenspielt, erklärt der Beitrag Retrieval-Evaluation: Wie Suchsysteme die Qualität ihrer Ergebnisse messen.

Strategische Bedeutung für SEO, GEO und AI-Search

Precision misst die Stufe, an der AI-Search-Systeme Passagen für eine Antwort auswählen. Das Generative Authority Model (GAM) von Ralf Dodler ordnet diese Abrufbarkeit der Ebene Retrieval Activation zu: Nur Passagen unter den obersten Treffern gelangen in die Antwort.

Ein Sprachmodell erhält oft nur fünf bis zehn Passagen als Kontext. Jede irrelevante Passage in diesem Fenster verdrängt eine relevante.
Systeme mit hoher Precision filtern Passagen aus, die ein Thema nur streifen. Ein Abschnitt, der die Frage direkt beantwortet, besteht diesen Filter.
Precision bewertet jede Passage einzeln. Ein starker Abschnitt auf einer schwachen Seite zählt trotzdem als relevanter Treffer.

Beispiel

Ein Suchsystem liefert zehn Treffer, vier davon sind relevant. Die Precision@10 beträgt 4 durch 10, also 0,4. Unter den ersten fünf Treffern sind drei relevant, die Precision@5 liegt bei 0,6.

Häufige Fragen zu Precision

Was ist der Unterschied zwischen Precision und Recall?

Precision misst den Anteil relevanter Treffer an allen Treffern, Recall den Anteil gefundener an allen relevanten Dokumenten. Precision bestraft Rauschen, Recall bestraft Lücken. Ein System mit wenigen, aber richtigen Treffern hat hohe Precision und niedrigen Recall.

Was bedeutet Precision@k?

Precision@k misst die Precision nur für die ersten k Treffer einer Rangliste. Der Cut-off macht Systeme vergleichbar, die unterschiedlich lange Listen liefern. Der Wert für k richtet sich danach, wie viele Treffer Nutzer oder Sprachmodelle tatsächlich verwenden.

Kann Precision steigen, wenn ein System weniger findet?

Precision steigt, wenn ein System weniger, aber treffsicherere Ergebnisse liefert. Dabei sinkt der Recall, sobald relevante Dokumente wegfallen. Deshalb wird Precision nie allein, sondern zusammen mit Recall oder einer rangbasierten Metrik bewertet.