/glossar/lokales-llm.md · text/markdown · 2,5 KB · ≈ 620 Tokens

Rohtext llms.txt

Datenschutz & Recht

Lokales LLM / On-Premise

Ein KI-Modell, das auf Ihrer eigenen Hardware oder im eigenen Rechenzentrum läuft, statt bei einem Cloud-Anbieter – die Daten verlassen das Haus nicht.

Auch genannt: On-Premise-KI, Self-Hosted LLM, lokales Sprachmodell

Warum das zählt

Für sensible Daten ist der lokale Betrieb oft der direkteste Weg zur Datenschutz-Sicherheit: kein Drittlandtransfer, kein Datenabfluss, volle Kontrolle. Der Preis dafür sind eigene Hardware und Wartung – eine Abwägung, die sich ab einem gewissen Volumen rechnet.

Was „lokal” bedeutet

Beim lokalen Betrieb läuft die Inferenz (/glossar#inferenz) – die eigentliche Nutzung des Modells – auf Hardware, die Sie kontrollieren: ein Server im Haus oder ein dediziertes System bei einem EU-Anbieter. Dafür kommen meist Open-Source-Modelle (/glossar#open-source-modell) zum Einsatz, deren Gewichte frei verfügbar sind.

Abwägung

Lokal / On-PremiseCloud-Modell
Datenkontrollevollständigbeim Anbieter
Datenschutzentschärft viele DSGVO-Fragenerfordert AVV, ggf. Drittland-Absicherung
KostenFixkosten (Hardware, Betrieb)laufende Token-Kosten (/glossar#tokenkosten)
Leistungbegrenzt durch eigene Hardwareoft die stärksten Modelle
Wartungeigene Verantwortungbeim Anbieter

Lokal ist kein Selbstzweck, sondern die richtige Wahl, wenn Datenschutz, Unabhängigkeit oder Dauerbetrieb bei hohem Volumen im Vordergrund stehen. Wo die Hardware nicht reicht, ist EU-Hosting (/glossar#eu-hosting) ein Mittelweg.

Aktualisiert 1. November 2026

Bereit für Klarheit?

Klären Sie in 30 Minuten, ob die KI-Potenzialanalyse der richtige nächste Schritt für Ihr Unternehmen ist

Erstgespräch buchen (/erstgespraech)