Insights · Leitfaden

Souveräne KI: Ihre Optionen für Sprachmodelle mit EU-Hosting.

„Wo landen unsere Daten?“ ist die erste Frage, die die meisten europäischen Unternehmen zu KI stellen – und sie verdient eine bessere Antwort als „in der Cloud“. Dieser Leitfaden zeigt die realistischen Optionen, von US-Modellanbietern mit vertraglichen Schutzmaßnahmen bis zu Modellen im eigenen Rechenzentrum, und wie Sie nach Datensensibilität statt nach Ideologie entscheiden.

01

Warum es darauf ankommt

Fünf Gründe, warum die Hosting-Frage nicht akademisch ist

Souveränität bei KI bedeutet, entscheiden und nachweisen zu können, wo Ihre Daten verarbeitet werden, wer darauf zugreifen kann, unter welchem Recht – und was passiert, wenn ein Anbieter seine Bedingungen ändert oder verschwindet. Für europäische Unternehmen wird diese Sorge von konkreten Pflichten getrieben, nicht von abstrakten Prinzipien.

  • DSGVO. Personenbezogene Daten in Prompts, Dokumenten und Ausgaben brauchen eine Rechtsgrundlage, einen Auftragsverarbeitungsvertrag und für Übermittlungen außerhalb der EU einen gültigen Übermittlungsmechanismus. Datenschutzbeauftragte fragen danach vor allem anderen.
  • Vertraulichkeit. Verträge, Produktentwürfe, M&A-Unterlagen und Quellcode sind wertvoll, ob sie personenbezogene Daten enthalten oder nicht. Die Anbieterbedingungen zu Training, Aufbewahrung und Zugriff entscheiden, ob sie überhaupt gesendet werden dürfen.
  • Branchenregulierung. Finanzdienstleister, Gesundheitswesen, öffentliche Stellen und kritische Infrastrukturen unterliegen Auslagerungs- und IKT-Risikoregeln, die dokumentierte Kontrolle über Anbieter und Standorte verlangen.
  • Vergabe und Kundenverträge. Viele Kundenvereinbarungen und öffentliche Ausschreibungen schreiben EU-Verarbeitung vor. Ein nicht konformer KI-Stack disqualifiziert Sie von Aufträgen, die Sie bereits haben.
  • Abhängigkeitsrisiko. Preise, Modellabkündigungen und Exportkontrollen liegen außerhalb Ihrer Kontrolle. Anbieter wechseln zu können ist etwas wert, auch wenn Sie es nie tun.

Nichts davon bedeutet, dass alles in Europa laufen muss. Es bedeutet, dass die Entscheidung je Datenklasse und Use Case getroffen werden sollte, mit verstandenen Abwägungen. Wie die Entscheidung dokumentiert wird, beschreibt unsere KI-Governance-Beratung.

02

Das Spektrum der Optionen

Vier Wege, ein Sprachmodell für europäische Arbeit zu betreiben

Die Optionen sind von der geringsten zur größten Kontrolle geordnet. Produktnamen sind Beispiele für das, was zum Zeitpunkt des Schreibens existiert – keine Empfehlungen und keine Aussagen über bestimmte Zertifizierungen; prüfen Sie die aktuellen Bedingungen jedes Anbieters.

1. US-Modellanbieter per API, mit EU-Schutzmaßnahmen

OpenAI, Anthropic und Google bieten ihre Modelle über APIs mit Unternehmensbedingungen an, die in der Regel kein Training auf Kundendaten, definierte Aufbewahrungsfristen, Auftragsverarbeitungsverträge und zunehmend Optionen für EU-basierte Verarbeitung umfassen. Die Leistung ist am stärksten, die Integration am einfachsten, und die Compliance-Argumentation stützt sich auf Verträge plus Übermittlungsmechanismen.

2. EU-Regionen der Hyperscaler

Dieselben oder vergleichbare Modelle sind innerhalb der großen Clouds verfügbar: Azure OpenAI Service in EU-Regionen, Amazon Bedrock in EU-Regionen, Google Vertex AI in EU-Regionen. Die Daten bleiben in der gewählten Region unter den bestehenden Verträgen, Sicherheitszertifizierungen und Identitätssystemen des Cloud-Anbieters, die Ihre IT ohnehin verwaltet. Die Anbieter bleiben Unternehmen mit US-Hauptsitz – für manche Aufsichtsbehörden und Kunden relevant, für andere nicht.

3. Europäische Anbieter und Clouds

Europäische Modellentwickler wie Mistral und Aleph Alpha sowie europäische Infrastrukturanbieter wie IONOS, STACKIT, Open Telekom Cloud und OVHcloud bieten Modelle und Hosting unter EU-Recht. Die Leistung der besten europäischen Modelle ist für viele Geschäftsaufgaben wettbewerbsfähig, auch wenn die Spitze meist anderswo gesetzt wird; das Ökosystem an Werkzeugen und Integrationen ist kleiner, wächst aber.

4. Selbst gehostete Modelle mit offenen Gewichten

Modellfamilien mit frei verfügbaren Gewichten wie Llama, Mistral, Qwen und Gemma können auf eigenen Servern oder gemieteter EU-GPU-Kapazität laufen. Nichts verlässt Ihre Umgebung, Sie kontrollieren Versionen und Updates, und es gibt keine Abhängigkeit pro Token. Der Preis ist operativ: Hardware oder GPU-Miete, MLOps-Kompetenz, Sicherheitsupdates – und die Tatsache, dass Sie nun selbst für das Verhalten des Modells verantwortlich sind.

Die vier Optionen im Vergleich
US-Anbieter per APIHyperscaler EU-RegionEuropäischer AnbieterSelbst gehostet, offene Gewichte
LeistungAm höchstenAm höchsten bis hochHoch für die meisten GeschäftsaufgabenGut bis hoch, je nach Modellgröße
DatenstandortAnbieterabhängig, EU-Optionen im KommenGewählte EU-RegionEUIhre Infrastruktur
Rechtsraum des AnbietersUSAUSA (Verträge mit EU-Gesellschaft)EUSie selbst
IntegrationsaufwandGeringGering bis mittelMittelHoch
KostenprofilPro Token, geringe FixkostenPro Token, geringe FixkostenPro Token oder LizenzHohe Fixkosten, geringe Grenzkosten
BetriebsaufwandKeinerGeringGering bis mittelHoch
Compliance-NachweisVerträge, ÜbermittlungsmechanismusCloud-Zertifizierungen, RegionEU-RechtsraumEigenes Audit
Lock-inMittelMittel bis hochMittelGering
03

Wie Sie entscheiden

Nach Datensensibilität routen, nicht nach Parole

Der häufigste Fehler ist eine unternehmensweite Entscheidung in die eine oder andere Richtung: „alles auf das US-Spitzenmodell“ oder „nichts verlässt unser Rechenzentrum“. Beides verschwendet Geld oder Leistung. Der gangbare Weg ist eine Klassifizierung von Daten und Use Cases und eine Routing-Regel je Klasse.

Entscheidungsmatrix nach Datenklasse
DatenklasseBeispieleTypisches Routing
Öffentlich oder unkritischMarketingtexte, öffentliche Dokumentation, allgemeine RechercheJede Option; Wahl nach Leistung und Kosten
Intern, wenige personenbezogene DatenProzessdokumente, Tickets ohne Kundenkennungen, Code ohne GeheimnisseUS-Anbieter mit Unternehmensbedingungen oder Hyperscaler-EU-Region
Vertraulich oder personenbezogenKundendaten, HR-Daten, Verträge, FinanzzahlenHyperscaler-EU-Region oder europäischer Anbieter, mit AVV und No-Training-Klausel
Hochsensibel oder reguliertPrivilegierte Rechtsunterlagen, Gesundheitsdaten, Geschäftsgeheimnisse, Daten regulierter BranchenEuropäischer Anbieter unter EU-Recht oder selbst gehostete offene Modelle

Die meisten Unternehmen nutzen am Ende zwei oder drei der vier Optionen gleichzeitig – was in Ordnung ist, solange das Routing in der Architektur durchgesetzt wird und nicht einzelnen Nutzern überlassen bleibt.

Eine praktikable Architektur

  • Eine Abstraktionsschicht. Anwendungen und Agenten rufen Modelle über ein Gateway auf, das die Routing-Regel anwendet, die Nutzung protokolliert und den Anbieter hinter einem Use Case ohne Codeänderung austauschen kann.
  • Klassifizierung an der Quelle. Dokumente und Datenquellen tragen ein Sensibilitätslabel; das Gateway weigert sich, ein hochsensibles Dokument an eine dafür nicht freigegebene Route zu senden.
  • Evaluation je Route. Jedes Modell hinter dem Gateway wird je Use Case gegen dasselbe Evaluationsset getestet, damit Sie die Leistungskosten einer souveräneren Route kennen, bevor Sie sie wählen.
  • Ausstiegsoptionen. Prompts, Evaluationssets und Feinabstimmungsdaten werden in anbieterneutralen Formaten gehalten. Ein Wechsel sollte eine Konfigurationsänderung und ein Regressionstest sein, kein Projekt.

Was jetzt zu tun ist

  1. Erfassen Sie die Datenklassen, die Ihre ersten KI-Use-Cases berühren, und kennzeichnen Sie sie.
  2. Vereinbaren Sie die Routing-Regel je Klasse mit Datenschutzbeauftragtem und IT-Sicherheit und schreiben Sie sie auf.
  3. Richten Sie ein Modell-Gateway ein, auch ein einfaches, damit die Regel durchgesetzt und die Nutzung protokolliert wird.
  4. Lassen Sie je Use Case dasselbe Evaluationsset auf mindestens zwei Routen laufen, bevor Sie sich festlegen.
  5. Überprüfen Sie die Entscheidung alle sechs Monate. Der Markt bewegt sich schnell, und eine Route, die letztes Jahr nicht tragfähig war, kann heute die richtige sein.

Unsere Leistungen KI-Agenten-Entwicklung und Datenbasis für KI bauen diese Architektur; die Governance-Beratung dokumentiert sie für Prüfer und Kunden.

04

Häufige Fragen

Ist EU-Hosting gesetzlich vorgeschrieben?

Nicht pauschal. Die DSGVO verlangt eine Rechtsgrundlage für die Übermittlung personenbezogener Daten außerhalb der EU und erlaubt Übermittlungen unter Mechanismen wie Angemessenheitsbeschlüssen oder Standardvertragsklauseln. Branchenregulierung und Kundenverträge können strengere Anforderungen stellen. Die Antwort hängt von Ihren Daten, Ihrer Branche und Ihren Verträgen ab – deshalb wird je Datenklasse entschieden. Das ist keine Rechtsberatung.

Sind europäische Modelle gut genug?

Für viele Geschäftsaufgaben – Zusammenfassen, Klassifizieren, Extrahieren, Textentwürfe auf Deutsch und in anderen europäischen Sprachen sowie Fragenbeantwortung mit Retrieval – ja. Bei den anspruchsvollsten Reasoning- und Programmieraufgaben wird die Spitze meist von US-Anbietern gesetzt. Die einzig verlässliche Antwort ist Ihr eigenes Evaluationsset auf beiden.

Wie teuer ist Selbsthosting?

Die Tokenkosten können bei Volumen sehr niedrig sein, aber die Fixkosten sind erheblich: GPU-Hardware oder -Miete, Leute, die Modelle betreiben können, Sicherheit und Updates sowie die Evaluationsarbeit, die sonst ein Anbieter übernimmt. Es rechnet sich bei hohen Volumina sensibler Arbeit und selten für einen ersten Piloten.

Können wir mit einem US-Anbieter starten und später wechseln?

Ja, wenn Sie es einplanen: eine Abstraktionsschicht, anbieterneutrale Prompts und Evaluationssets und keine Abhängigkeit von anbieterspezifischen Funktionen, die Sie nicht ersetzen können. Die meisten unserer Kunden starten mit der leistungsfähigsten Option für unkritische Use Cases und ergänzen souveränere Routen, sobald sensible Use Cases folgen.

05

Passend dazu

Nächster Schritt

Finden wir den ersten Workflow, der sich wirklich lohnt.

Ein 30-minütiges Erstgespräch, ohne Folien und ohne Verpflichtung. Wir hören zu, fragen nach Ihren Prozessen und sagen Ihnen ehrlich, wo KI-Agenten sich rechnen – und wo nicht.