Modelle & Souveränität

Modelle, Preise und Datenresidenz-Stufen entdecken.

Modelle werden in der Form provider/model identifiziert, z. B. mistral/mistral-medium-3.5. Listen Sie alle aktiven Modelle mit GET /v1/models auf. Die Liste ist für jeden Schlüssel gleich. Ihre Datenschutz-Einstellungen und Guardrails greifen beim Aufruf eines Modells, nicht hier:

json
{
  "object": "list",
  "data": [
    {
      "id": "mistral/mistral-medium-3.5",
      "object": "model",
      "owned_by": "mistral",
      "kind": "chat",
      "context_length": 262144,
      "sovereignty": "strict",
      "zdr": "partial",
      "no_training": true,
      "forbidden_segments": [],
      "pricing": {
        "input_micro_eur_per_mtok": 1250000,
        "output_micro_eur_per_mtok": 6400000
      },
      "supported_parameters": ["max_tokens", "temperature", "top_p", "stop", "stream", "tools", "tool_choice"]
    }
  ]
}

Felder

FeldBedeutung
kindchat, embedding, transcription oder speech. Bestimmt, welcher Endpunkt das Modell annimmt.
context_lengthMaximale Tokens pro Anfrage, sofern der Anbieter den Wert veröffentlicht.
sovereigntystrict oder pragmatic, siehe unten.
zdrZero Data Retention beim Anbieter: default (der Anbieter speichert nichts), partial (begrenzte Speicherung, etwa Missbrauchs-Logs) oder none (keine Zero-Retention-Zusage festgestellt oder geprüft; der Anbieter speichert Prompts womöglich).
no_trainingtrue, wenn der Anbieter Training auf Ihren Daten vertraglich ausschließt.
forbidden_segmentsRegulierte Nutzungssegmente, die der Anbieter vertraglich ausschließt (etwa health). Ist Ihre Organisation für eines davon registriert, werden Anfragen an dieses Modell mit 403 segment_not_permitted abgelehnt.
pricingPreise in Mikro-EUR: pro Million Input- und Output-Tokens bei Chat und Embeddings, audio_micro_eur_per_hour bei Transkription, character_micro_eur_per_million bei Sprachausgabe.
supported_parametersDie Parameter, die dieses Modell berücksichtigt. Prüfen Sie auf tools, bevor Sie Tools senden, und auf reasoning, bevor Sie Reasoning anfordern.
reasoningNur bei Modellen vorhanden, die denken. Siehe Reasoning.

Souveränitätsstufen

Jedes Modell deklariert eine sovereignty-Stufe, damit Sie wählen können, wie streng Ihre Anforderungen an die Datenresidenz sind:

StufeBedeutung
strictEin EU-eigener Anbieter, den Kontinent als souverän einstuft.
pragmaticAus der EU bedient, aber von einem Anbieter mit Muttergesellschaft außerhalb der EU oder einem, der auf fremder Cloud-Infrastruktur läuft.

Die Stufe wird bei jedem Modell zurückgegeben. So können Sie strict verlangen, wo der Anwendungsfall einen EU-eigenen Anbieter erfordert, und pragmatic anderswo zulassen. Siehe Maximaler Datenschutz.

Modellarten

ArtEndpunkt
chatPOST /v1/chat/completions, POST /v1/responses
embeddingPOST /v1/embeddings
transcriptionPOST /v1/audio/transcriptions
speechPOST /v1/audio/speech

Ein Modell an einen Endpunkt einer anderen Art zu senden, wird abgelehnt; eine unbekannte oder deaktivierte ID liefert 404 model_not_found.

Preise und die Geldeinheit

Geld ist überall in Kontinent ganzzahliges Mikro-EUR, sodass es keine Fließkomma-Rundung in der Abrechnung gibt:

1 EUR = 1.000.000 µEUR

Preise werden pro Million Tokens angegeben, getrennt nach Eingabe- und Ausgaberate, und bei jedem Modell zurückgegeben. Im Beispiel oben kostet die Eingabe 1.250.000 µEUR/Mtok, das sind 1,25 € pro Million Eingabe-Tokens, und die Ausgabe 6,40 € pro Million Ausgabe-Tokens. Sie zahlen nur für die Tokens, die eine Anfrage tatsächlich verbraucht.

Zwei Regeln senken oder erhöhen diesen Preis und stehen nicht in /v1/models:

  • Gecachter Input. Liefert ein Anbieter einen Teil Ihres Prompts aus seinem Prompt-Cache und meldet das, werden diese Tokens zum niedrigeren Cache-Preis des Modells abgerechnet. Die Zahl steht als cached_tokens in den Logs.
  • Langer Kontext. Einige Modelle haben oberhalb einer Prompt-Länge einen höheren Preis. Erreicht ein Prompt diese Schwelle, wird die ganze Anfrage zu diesem Preis abgerechnet, so wie der Anbieter es misst.

Siehe Rate-Limits & Guthaben, wie Ausgaben gemessen werden.

Verwandte Seiten

API-Referenz Preis & Performance Maximaler Datenschutz