Zum Hauptinhalt springen

Routing

Was ist KI-Modell-Routing?

Routing schickt jede Anfrage an ein Modell, das nach Aufgabe, Kosten, Datenschutz oder Latenz gewählt wurde, statt eines für alles zu nutzen. Wie Router entscheiden und wie sie scheitern.

Alle Erklärungen · Zuletzt geprüft:

Worüber ein Router entscheidet

Die meisten Router kombinieren einige Signale: welche Art Aufgabe es zu sein scheint, wie lang die Eingabe ist, wie sensibel die Daten sind, wie schnell die Antwort gebraucht wird und wie viel die Anfrage kosten darf.

Diese Signale widersprechen einander. Das schnellste Modell ist selten das stärkste; die datenschutzfreundlichste Option selten die leistungsfähigste. Ein Router ist eigentlich eine Richtlinie darüber, worauf verzichtet wird — die nützlichen lassen Sie sagen, was Ihnen wichtig ist, statt zu raten.

Automatisches und ausdrückliches Routing

Automatisches Routing liest die Anfrage und entscheidet. Das ist bequem und gelegentlich falsch, und Falschheit ist schwer zu bemerken, wenn das System nicht sagt, welches Modell geantwortet hat.

Ausdrückliches Routing heißt, Sie geben die Priorität vor — das bleibt lokal, das bleibt günstig, dafür das stärkste Reasoning — und der Router hält sich daran. In der Praxis wollen die meisten beides: eine sinnvolle Voreinstellung und die Möglichkeit, sie für die Anfrage vor sich zu übergehen.

Wie Routing schiefgeht

Die beiden häufigen Fehler sind stille Herabstufungen und unsichtbare Entscheidungen. Eine stille Herabstufung ist ein Router, der Ihre sorgfältige Anfrage klammheimlich an ein billiges Modell gibt. Eine unsichtbare Entscheidung ist jedes Routing, das Sie im Nachhinein nicht prüfen können.

Beides hat dieselbe Lösung: Das System muss festhalten, welches Modell tatsächlich geantwortet hat, und es anzeigen. Ein Router, den Sie nicht prüfen können, ist von einem kaputten nicht zu unterscheiden.

Wie ClawAI es macht

ClawAI hat 7 Routing-Modi. Auto liest die Anfrage und wählt. Manuell fixiert ein Modell. Nur-lokal hält die gesamte Kette auf Modellen, die auf Ihrer Hardware laufen. Datenschutz zuerst bevorzugt lokal und weigert sich, das stillschweigend zu verlassen. Die übrigen neigen die Wahl zu geringerer Latenz, stärkerem Reasoning oder niedrigeren Kosten.

Jede Antwort hält das Modell fest, das sie erzeugt hat — eine automatische Entscheidung ist prüfbar statt Vertrauenssache.

Häufige Fragen

Verschlechtert Routing die Antwortqualität?
Es kann, wenn die Richtlinie nicht zur Anfrage passt. Deshalb wählen Sie den Modus und deshalb wird das antwortende Modell angezeigt. Routing, das Sie sehen und übergehen können, ist eine Kostenkontrolle; Routing, das Sie nicht sehen, ist eine Herabstufung.
Kann ein Router Daten vollständig von Cloud-Anbietern fernhalten?
Nur wenn er ablehnen darf, statt auszuweichen. Ein Nur-lokal-Modus, dessen Fallback-Kette einen Cloud-Anbieter erreicht, ist keine Datenschutzkontrolle. ClawAIs Nur-lokal-Modus hält seine Kette auf lokalen Anbietern.
Lohnt sich Routing für eine Einzelperson?
Meist ja, eher wegen der Kosten als wegen der Verlässlichkeit. Die meisten individuellen Arbeitslasten bestehen überwiegend aus Routinefragen mit wenigen schweren; die Routinefragen an ein günstigeres Modell zu geben ist der größte Hebel auf eine persönliche KI-Rechnung.

Ausprobieren statt darüber lesen

ClawAI liefert 7 Routing-Modi und zeigt das gewählte Modell an jeder Nachricht — Sie können den Router prüfen, statt ihm zu vertrauen.