Support kontaktieren

Wir melden uns per E-Mail. Meist innerhalb von zwei Tagen.

Zum Schutz vor Missbrauch prüft Google reCAPTCHA diese Einsendung. Dabei werden Daten an Google übertragen. Das Skript wird erst geladen, wenn Sie dieses Formular öffnen.

← Alle Beiträge

Was das Modell darf

· Lukas Wojcik

Oben auf einer öffentlichen Statistikseite können hier zwei bis drei Sätze stehen, die beschreiben, was der Zähler in diesem Monat getan hat. Geschrieben hat sie ein Sprachmodell. Das Modell erfindet dabei nichts, und die Anordnung, die das wahr macht, ist beschreibenswert — denn der naheliegende Weg, diese Funktion zu bauen, hat diese Eigenschaft nicht.

Der Pi sucht die Zahlen Der Pi ein Prompt je Fakt Das Modell ein Satz Der Pi prüft jede Ziffer gegen den Prompt Satz erscheint Satz wird verworfen

Der Pi führt das SQL aus, entscheidet, welche Zahl der Erwähnung wert ist, und schreibt den Prompt. Das Modell macht aus einem Fakt einen Satz in der gewünschten Sprache. Danach liest der Pi die Antwort zurück und wirft sie weg, wenn eine Ziffer darin nicht aus dem Prompt stammt.

Die einzige Freiheit des Modells ist also die Formulierung. Es wählt nicht aus, es rechnet nicht, es rundet nicht. Was es beiträgt, ist genau das, was Schablonen nicht können: elf Sprachen, die sich gelesen wie Sprache anfühlen.

Drei Prüfungen, und für welchen Fehler jede da ist

Keine davon ist aus Vorsicht entstanden. Jede gibt es, weil am 17. August 2026 etwas Bestimmtes schiefging. Ein kleines Modell bekam zwei Fakten über einen Zähler — stärkster Wochentag Montag mit 46 %, und 76 % der Besucher aus Polen bei 5 Ländern — und schrieb daraus einen Satz, in dem Mittwoch der stärkste Tag war und 46 % der Besucher aus Polen kamen.

Zwei verschiedene Fehler in einem Satz, und keiner davon ist eine erfundene Zahl.

  • Jede Ziffer muss im Prompt vorkommen. Das fängt erfundene Zahlen. Es hat eine Folge, die man später leicht falsch macht: der Anweisungsteil des Prompts enthält überhaupt keine Ziffern. Dort steht „one or two sentences", nie „1-2", denn sonst wären die 1 und die 2 anschließend erlaubte Zahlen in der Antwort.
  • Ein Prompt je Fakt. Das fängt vertauschte Zahlen. Die 46 oben war echt — sie gehörte nur zum anderen Fakt, und eine Prüfung über die Menge der Zahlen kann das nicht sehen. Sieht das Modell immer nur einen Fakt, gibt es nichts zu vertauschen.
  • Auch Namen werden geprüft. Das fängt den Montag, der zum Mittwoch wird. Der Name steht im Fakt in der Zielsprache, er muss wörtlich in der Antwort auftauchen, und seine Geschwister dürfen es nicht.

Was sie nicht fangen

Das gehört in denselben Atemzug wie der Rest. Zwei Dinge kommen durch.

Ein Satz, der ohne Ziffern etwas Falsches behauptet — „die meisten Besucher", wo es 46 % waren — wird von keiner der drei gefangen. Die Bauart fängt das stattdessen ab: die Wertung steckt schon in dem Fakt, den der Pi ausgewählt hat, nicht in der Freiheit des Modells.

Und ein Satz, der von etwas ganz anderem handelt als sein Fakt, kommt durch, solange die Ziffern passen. Dagegen hilft nur ein Modell, das Anweisungen befolgt. Bei Merkmalen mit Namen — Wochentag, Gerät, Bot, Seite — deckt die dritte Prüfung es zusätzlich ab.

Eine Prüfung, die nur erfundene Zahlen fängt, hätte den Satz von oben unverändert durchgelassen. Es waren echte Zahlen an den falschen Stellen, und diese Fehlerart sieht man nur, wenn man auf die Ausgabe schaut statt auf die Idee.

Anzeige