← Zurück zum Blog

Brauchen Unternehmen jetzt eine AI Policy?

11. Oktober 2026
Brauchen Unternehmen jetzt eine AI Policy?

Ja: Unternehmen sollten jetzt mit einem schlanken, risikobasierten Policy-Gerüst starten, statt auf die perfekte Lösung zu warten. Der erste Schritt ist ein Inventar aller KI-Anwendungsfälle samt erster Risikoklassifizierung, orientiert am europäischen AI Act, seiner Schulungspflicht nach Art. 4 und bewährten IHK-Musterstrukturen.


Kurz gesagt:

  • Erfassen Sie zunächst sämtliche genutzten und geplanten Anwendungen mit KI, ordnen Sie diese nach Risiko ein und führen Sie eine Liste freigegebener Werkzeuge.
  • Bei der Bewerberauswahl oder bei Kreditentscheidungen gelten für Hochrisikoanwendungen strenge Dokumentationspflichten und Vorgaben zum Risikomanagement; folgenreiche Entscheidungen darf kein System mit KI allein treffen.
  • Untersagen Sie private Konten für geschäftliche Zwecke; Kundendaten, Gesundheitsdaten, Personalakten und nicht anonymisierte Finanzdaten dürfen nicht in ungeprüfte Werkzeuge mit KI gelangen.
  • Dokumentieren Sie rollenspezifische Schulungen nach Artikel 4 des AI Act und benennen Sie eine verantwortliche Stelle für Planung und Nachweise.

Menter
KI-Nutzung sicher und praxisnah gestalten
Menter unterstützt KMU mit strategischer KI-Beratung, Workshops und Keynotes, abgestimmt auf Branche und Unternehmensgröße.
KI-Beratung entdecken

Inhaltsverzeichnis

Warum eine formale KI-Richtlinie jetzt wichtig ist

Ohne klare Regeln entscheidet jeder Mitarbeitende selbst, welches Tool er nutzt und welche Daten er eingibt. Das Ergebnis ist Schatten-IT: unkontrollierte Accounts, unklare Haftung und Datenschutzverstöße, die erst auffallen, wenn es zu spät ist. Eine Richtlinie schafft dagegen Rechtssicherheit, schützt sensible Geschäftsdaten und baut Vertrauen auf, bei Kunden wie bei der eigenen Belegschaft.

Der AI Act verfolgt genau diesen Gedanken: ein risikobasierter Rahmen, der nicht jede KI-Anwendung gleich behandelt, sondern nach Gefährdungspotenzial unterscheidet. Für KMU bedeutet das: Wer früh eine Struktur schafft, vermeidet spätere Nachbesserungen unter Zeitdruck.

Die wichtigsten Argumente für eine Richtlinie lassen sich kurz zusammenfassen:

  • Rechtssicherheit: klare Regeln verhindern teure Nachkorrekturen bei Audits oder Kontrollen
  • Datenschutz: definierte Datenregeln schützen vor versehentlichen DSGVO-Verstößen
  • Vertrauen: Kunden und Mitarbeitende sehen, dass KI verantwortungsvoll eingesetzt wird
  • Skalierbarkeit: ohne Regeln bremst Unsicherheit jede größere KI-Initiative aus

Kernbausteine einer KI-Richtlinie: praktische Checkliste

Eine Richtlinie, die in der Praxis funktioniert, besteht aus wenigen, aber konkreten Bausteinen. Nach IHK-Empfehlungen zählen mehrere Elemente gehören zum Kern jeder brauchbaren Richtlinie, und sie lassen sich direkt auf ein KMU übertragen.

  1. Geltungsbereich: Wer ist betroffen, welche Abteilungen, welche Rollen
  2. Freigegebene Tools: eine klare Liste erlaubter KI-Anwendungen, keine Grauzonen
  3. Erlaubte Use Cases: wofür darf KI genutzt werden, wofür ausdrücklich nicht
  4. Datenregeln: welche Daten dürfen niemals in ein KI-System eingegeben werden
  5. Human-in-the-Loop: wann ein Mensch das Ergebnis prüfen muss, bevor es wirksam wird
  6. Kennzeichnungspflicht: wie KI-generierte Inhalte intern und extern markiert werden
  7. Zuständigkeiten: wer verantwortet die Richtlinie und wer genehmigt Ausnahmen
  8. Review-Rhythmus: wie oft die Richtlinie aktualisiert wird

Private Accounts für geschäftliche KI-Nutzung gehören verboten, ebenso das Hochladen von Kundendaten in unkontrollierte Tools. Ein funktionierendes Vorfallmanagement mit klarer Meldematrix gehört ebenfalls dazu: Mitarbeitende müssen wissen, an wen sie sich wenden, wenn ein KI-System fehlerhafte oder fragwürdige Ergebnisse liefert.

Profi-Tipp: Beginnen Sie mit einer einzigen DIN-A4-Seite Basisregeln, und ergänzen Sie risikospezifische Anhänge erst, wenn der jeweilige Anwendungsfall konkret wird.

Die IHK Schwaben betont zudem, dass die Richtlinie kein reines IT-Dokument bleiben darf. Fachbereiche, Personalabteilung und Geschäftsführung müssen eingebunden sein, sonst bleibt sie Theorie.

Rechtlicher Rahmen: AI Act, Hochrisiko-Einstufung und Schulungspflicht nach Art. 4

Der AI Act ist der erste harmonisierte Rechtsrahmen für KI in der Europäischen Union. Er legt fest, welche Pflichten für welche Risikostufe gelten, von minimalem Risiko bis zu verbotenen Praktiken.

Hochrisiko-KI-Systeme unterliegen nach dem AI Act besonders strengen Anforderungen an Dokumentation, Risikomanagement und technische Absicherung. Für KMU heißt das konkret: Wer ein System einsetzt, das etwa in Bewerbungsprozesse oder Kreditentscheidungen eingreift, muss nachweisen können, wie das System funktioniert, welche Daten es verwendet und wie Fehler erkannt werden.

Wesentliche Punkte, die KMU priorisieren sollten:

  • Klassifizierung: zuerst prüfen, in welche Risikokategorie der jeweilige Anwendungsfall fällt
  • Dokumentationspflicht: technische Unterlagen und Risikobewertungen müssen vorliegen und aktuell sein
  • Transparenz: Nutzer müssen erkennen können, wann sie mit einem KI-System interagieren
  • Schulungspflicht nach Art. 4: Unternehmen müssen sicherstellen, dass ihr Personal über ausreichende KI-Kompetenz verfügt

Die praktische Umsetzung von Art. 4 erfordert laut IHK Hannover dokumentierte Schulungspläne, Nachweise und eine klar benannte verantwortliche Stelle. Mehr zu den einzelnen Stufen findet sich in unserem Beitrag zu den AI Act Risikoklassen.

Sechs Schritte zur Erstellung und Einführung einer AI Policy

Eine Richtlinie entsteht nicht am Schreibtisch allein, sondern in einem geordneten Prozess mit klaren Verantwortlichkeiten.

  1. Inventar & Use-Case-Mapping: alle laufenden und geplanten KI-Anwendungen erfassen, Ergebnis ist eine Tool- und Use-Case-Liste
  2. Risikoklassifizierung: jeden Anwendungsfall nach AI-Act-Logik einordnen, Ergebnis ist eine priorisierte Risikoübersicht
  3. Stakeholder-Team bilden: Geschäftsführung, IT, Datenschutz und Fachbereiche an einen Tisch holen
  4. Policy schreiben: modular aufbauen, Basisregeln plus risikospezifische Anhänge, Ergebnis ist der erste Entwurf
  5. Rollout & Schulung: Richtlinie kommunizieren, Trainingsplan umsetzen, Ergebnis ist ein dokumentierter Nachweis der Kompetenzvermittlung
  6. Monitoring & Review: Nutzung beobachten, Meldematrix aktiv halten, Richtlinie in festen Abständen aktualisieren

Profi-Tipp: Planen Sie für die ersten Schritte realistisch einige Wochen ein, mit einem kleinen Kernteam von drei bis fünf Personen, statt auf einen großen Projektauftakt zu warten.

Jeder Schritt liefert ein greifbares Ergebnis: eine Freigabeliste für Tools, einen Trainingsplan für die Belegschaft, eine Meldematrix für Vorfälle. Wer diese Dokumente von Anfang an mitdenkt, vermeidet, dass die Richtlinie am Ende nur als PDF in der Schublade landet. Einen methodischen Rahmen für die organisatorische Einbindung bietet unser Beitrag zum AI Operating Model.

Organisation und Governance: Rollen, Freigaben und Meldewege

Eine Richtlinie funktioniert nur, wenn klar ist, wer sie trägt. Vier Rollen sollten in jedem KMU definiert sein: die Geschäftsführung als letzte Entscheidungsinstanz, eine KI-verantwortliche Person für die operative Umsetzung, die Datenschutzbeauftragte für die DSGVO-Perspektive und Fachbereichs-Owner, die ihre jeweiligen Use Cases kennen.

Für neue KI-Tools braucht es einen klaren Freigabeprozess: Antrag, Prüfung durch die verantwortliche Stelle, Dokumentation der Entscheidung. Ohne diesen Prozess entsteht wieder genau die Schatten-IT, die die Richtlinie verhindern soll.

Die Meldematrix ist dabei zentral. Laut Anwalt muss sie konkrete Eskalationszeiten und Schnittstellen nennen, sonst bleibt sie unrealistisch:

  • Erste Meldestelle: direkte Führungskraft oder benannte KI-Ansprechperson
  • Eskalationsstufe zwei: IT-Security bei technischen Vorfällen
  • Eskalationsstufe drei: Datenschutzbeauftragte bei personenbezogenen Daten
  • Information der Geschäftsführung bei größeren Vorfällen oder wiederholten Verstößen

Einen vertiefenden Rahmen für diese Struktur bietet unser Artikel zur KI-Governance.

Praxis-Vorlage und Umsetzungsansätze für den Alltag

Eine Richtlinie, die aus einem einzigen starren Dokument besteht, scheitert oft an der Praxis. Bewährt hat sich ein modulares Modell: eine kurze Basisrichtlinie, ergänzt durch risikobasierte Anhänge für HR, Kundenberatung oder Produktion. So bleibt das Dokument lesbar, und neue Anwendungsfälle lassen sich ergänzen, ohne die Basis neu zu schreiben.

Typische KMU-Use-Cases und ihre grobe Einstufung lassen sich gut durch praktische Beispiele zur KI Social-Media-Arbeit in Vereinen ergänzen, um einfache Use-Cases zu verstehen.

  • Texterstellung für Marketing: in der Regel geringes Risiko, Kennzeichnung empfehlenswert
  • Kundenservice-Chatbot: mittleres Risiko, Human-in-the-Loop bei komplexen Anfragen sinnvoll
  • Vorauswahl von Bewerbungen: potenziell hohes Risiko, besondere Dokumentationspflichten
BausteinZweckBeispielanwendung
BasisrichtlinieGilt für alle MitarbeitendenFreigegebene Tools, Datenregeln
Anhang HRRisikospezifische RegelnBewerbervorauswahl
Anhang KundenberatungRisikospezifische RegelnChatbot-Einsatz

Wer eine solche Struktur aufsetzen will, aber keine Kapazität für die Detailarbeit hat, findet in unserer Strategieberatung, Workshops und Mitarbeiter-Training einen praxisnahen Einstieg.

Integration der KI-Policy in bestehende Unternehmensrichtlinien

Eine KI-Richtlinie sollte kein isoliertes Dokument sein, das neben Datenschutzrichtlinie, IT-Sicherheitsrichtlinie und Compliance-Handbuch existiert. Sie funktioniert besser, wenn sie an bestehende Strukturen anknüpft, statt sie zu duplizieren.

Konkret heißt das: Die Datenregeln der KI-Richtlinie verweisen auf die bestehende Datenschutzrichtlinie, statt sie neu zu formulieren. Die Meldematrix für KI-Vorfälle nutzt dieselben Eskalationswege wie das bestehende IT-Sicherheits-Incident-Management. Und die Freigabeprozesse für neue Tools laufen über denselben Ausschuss, der bereits neue Software oder Lieferanten prüft.

Diese Verzahnung hat zwei Vorteile. Erstens vermeidet sie Widersprüche, etwa wenn die KI-Richtlinie andere Fristen für Meldungen vorgibt als das allgemeine Compliance-System. Zweitens erleichtert sie die Akzeptanz: Mitarbeitende lernen nicht ein komplett neues System, sondern eine Ergänzung zu Prozessen, die sie bereits kennen.

Für Unternehmen, die bereits ein Compliance-Management-System betreiben, lohnt sich ein kurzer Abgleich: Welche Kontrollen, Audits und Berichtspflichten existieren schon, und wo lässt sich die KI-Richtlinie einfach andocken, statt eine Parallelstruktur aufzubauen. Gerade im Mittelstand, wo Compliance-Teams klein sind, spart das Ressourcen und reduziert das Risiko, dass Regelungen aneinander vorbeilaufen.

Umgang mit Bias und Fairness in der KI-Nutzung

KI-Systeme übernehmen die Muster ihrer Trainingsdaten, auch die unerwünschten. Wenn ein System überwiegend mit historischen Daten trainiert wurde, die bestimmte Gruppen benachteiligt haben, kann es diese Benachteiligung fortschreiben, etwa bei der Vorauswahl von Bewerbungen oder der Bewertung von Kreditanträgen.

Für KMU bedeutet das nicht, dass jedes Tool aufwendig technisch geprüft werden muss. Praktikabler ist ein risikobasierter Blick: Bei Anwendungen mit direkter Wirkung auf Menschen, etwa Personalentscheidungen, gehört eine Fairness-Prüfung in den Freigabeprozess. Das kann so einfach sein wie eine Stichprobenkontrolle, bei der Ergebnisse für unterschiedliche Gruppen verglichen werden.

Die Richtlinie sollte außerdem festlegen, dass Entscheidungen mit erheblicher Tragweite für einzelne Personen nie allein von einem KI-System getroffen werden. Das Prinzip Human-in-the-Loop, das bereits als Kernbaustein genannt wurde, erfüllt hier eine doppelte Funktion: Es sichert Qualität und wirkt zugleich als Korrektiv gegen verzerrte Ergebnisse.

Wichtig ist auch die Dokumentation: Wenn eine Entscheidung angefochten wird, muss nachvollziehbar sein, welche Daten und welches System zur Entscheidung beigetragen haben. Das ist nicht nur eine Frage der Fairness, sondern deckt sich mit den Dokumentationspflichten, die der AI Act für risikoreichere Anwendungen vorsieht.

Umgang mit Bias und Fairness in der KI-Nutzung — overview diagram

Datenschutz im Unternehmenskontext: DSGVO und KI-Anwendungen

Die DSGVO gilt für KI-Systeme genauso wie für jede andere Datenverarbeitung, mit einer zusätzlichen Schwierigkeit: Viele KI-Tools verarbeiten Daten in einer Weise, die für Mitarbeitende nicht transparent ist. Wer einen Prompt mit Kundendaten in ein öffentliches KI-Tool eingibt, verarbeitet unter Umständen personenbezogene Daten außerhalb der eigenen Kontrolle.

Die Richtlinie muss deshalb konkret benennen, welche Datenkategorien niemals in ein KI-System eingegeben werden dürfen: Kundendaten, Gesundheitsdaten, Personalakten, Finanzdaten ohne vorherige Anonymisierung. Für Tools, die Daten verarbeiten und speichern, gehört die Prüfung des Serverstandorts und der Auftragsverarbeitungsvereinbarung zum Pflichtprogramm, bevor ein Tool auf die Freigabeliste kommt.

Ein weiterer Punkt betrifft die Rechtsgrundlage: Wird KI zur automatisierten Entscheidungsfindung eingesetzt, greift Artikel 22 der DSGVO mit besonderen Anforderungen an Transparenz und Widerspruchsmöglichkeiten. Diese Anforderungen sollten in der Richtlinie an der Stelle stehen, wo Human-in-the-Loop beschrieben wird, damit beide Themen nicht getrennt behandelt werden.

Die Datenschutzbeauftragte sollte deshalb nicht erst am Ende, sondern bereits bei der Tool-Auswahl eingebunden sein. Das verhindert, dass ein Fachbereich sich für ein Tool entscheidet, das datenschutzrechtlich gar nicht freigegeben werden kann.

Datenschutz im Unternehmenskontext: DSGVO und KI-Anwendungen — overview diagram

Change Management und Akzeptanz bei Mitarbeitenden

Die beste Richtlinie bringt wenig, wenn sie als Verbotskatalog wahrgenommen wird. Akzeptanz entsteht, wenn Mitarbeitende verstehen, dass die Regeln sie schützen und nicht nur einschränken, etwa vor der Verantwortung für eine fehlerhafte KI-Entscheidung, die sie allein getroffen hätten.

Kommunikation sollte deshalb früh ansetzen, nicht erst, wenn das Dokument fertig ist. Wer Fachbereiche schon bei der Erstellung einbindet, etwa über kurze Interviews zu ihren tatsächlichen Use Cases, bekommt eine Richtlinie, die zur Arbeitsrealität passt, und gleichzeitig Fürsprecher in den Teams.

Schulungen sind der zweite Hebel. Sie sollten nicht als einmaliges Pflichtseminar stattfinden, sondern als kurze, rollenspezifische Einheiten: Was darf das Marketing-Team, was die Personalabteilung, was die Buchhaltung. Das deckt sich mit der Schulungspflicht aus Art. 4 des AI Act und liefert gleichzeitig den Nachweis, der im Streitfall gebraucht wird. Details dazu finden sich in unserem Beitrag zur KI-Schulung für Mitarbeiter.

Ein einfacher, schneller Freigabeprozess erhöht die Akzeptanz zusätzlich: Wenn die Genehmigung eines neuen Tools Wochen dauert, weichen Mitarbeitende auf ungeprüfte Alternativen aus. Ein Prozess, der in wenigen Tagen eine Antwort liefert, hält die Richtlinie lebendig statt zur Umgehungsregel zu machen.

Sicherheitsmaßnahmen im Umgang mit KI-Systemen

Sicherheit bei KI-Systemen beginnt nicht erst bei Cyberangriffen, sondern bei alltäglichen Fehlern: falsch konfigurierte Zugriffsrechte, unverschlüsselte Datenübertragung an externe Tools, fehlende Protokollierung, wer wann welches System genutzt hat.

Ein praktischer Ausgangspunkt ist eine Positivliste freigegebener Tools, kombiniert mit technischen Maßnahmen wie Single-Sign-On, damit Nutzung nachvollziehbar bleibt und nicht über private, ungeschützte Zugänge läuft. Für Tools, die über Programmierschnittstellen angebunden werden, gehört eine Prüfung der Schnittstellensicherheit und Zugriffsbeschränkung zum Standard.

Besonders bei Hochrisiko-Anwendungen verlangt der AI Act technische Maßnahmen zur Absicherung, etwa Mechanismen zur Erkennung fehlerhafter Ausgaben und zur Protokollierung von Entscheidungen. Diese Anforderungen lassen sich nicht nachträglich aufsetzen, wenn das System bereits im produktiven Einsatz ist, sie gehören in die Prüfung vor der Freigabe.

Regelmäßige Kontrollen gehören ebenfalls in die Sicherheitsstrategie: Wer prüft, ob freigegebene Tools weiterhin den vereinbarten Standards entsprechen, besonders wenn Anbieter neue Funktionen ausrollen oder Server-Standorte ändern. Diese Kontrolle sollte an denselben Review-Rhythmus gekoppelt sein, der ohnehin für die Richtlinie selbst gilt.

Autorenperspektive: Prioritäten und typische Stolperfallen

Der häufigste Fehler ist die Vollständigkeitsfalle: Teams versuchen, eine universelle Richtlinie für alle Eventualitäten zu schreiben, und verzetteln sich monatelang. Ein modulares, risikobasiertes Gerüst kommt schneller in den Alltag und lässt sich erweitern, sobald neue Anwendungsfälle auftauchen.

Der größte Hebel liegt nicht in juristischer Präzision, sondern in einfachen Freigabewegen und kurzen, rollenspezifischen Schulungen. Wer hier investiert, sieht messbare Akzeptanz schon nach wenigen Wochen, lange bevor jedes Detail der Richtlinie final steht.

— Shaun

Kurzangebot: Wie wir beim Aufbau Ihrer KI-Policy unterstützen

Menter

Eine Richtlinie zu schreiben ist das eine, sie in Ihrem Betrieb zum Leben zu bringen das andere. Genau dort setzen wir an: mit KI-Strategieberatung für KMU, Workshops und Mitarbeiter-Training, zugeschnitten auf Ihre Branche und Unternehmensgröße, mit zertifizierter INQA-Expertise und einem klaren Blick auf schnelle Anwendbarkeit statt langer Theoriephasen. Wenn Sie direkt einsteigen möchten, vereinbaren Sie einen Termin für ein erstes Gespräch.

FAQ

Was ist eine KI-Richtlinie für Unternehmen genau?

Eine KI-Richtlinie ist ein verbindliches internes Regelwerk, das festlegt, welche KI-Systeme zu welchem Zweck genutzt werden dürfen, welche Daten tabu sind und wer die Verantwortung trägt, so die IHK Schwaben. Sie betrifft die gesamte Organisation, nicht nur die IT-Abteilung.

Welche Schulungspflichten gelten nach dem AI Act für Mitarbeitende?

Artikel 4 des AI Act verpflichtet Unternehmen, sicherzustellen, dass Personal über ausreichende KI-Kompetenz verfügt, abgestimmt auf Kontext und Risiko der jeweiligen Anwendung. Laut IHK Hannover braucht das dokumentierte Schulungspläne und Nachweise.

Wie starte ich praktisch mit einer KI-Richtlinie in einem kleinen Unternehmen?

Der erste Schritt ist ein Inventar aller aktuell genutzten KI-Tools und Anwendungsfälle, gefolgt von einer groben Risikoeinstufung. Darauf lässt sich eine schlanke Basisrichtlinie mit risikospezifischen Anhängen aufbauen, statt auf Anhieb ein vollständiges Dokument zu verfassen.

Wer sollte für die KI-Richtlinie im Unternehmen verantwortlich sein?

Üblich ist ein kleines Team aus Geschäftsführung, einer benannten KI-verantwortlichen Person und der Datenschutzbeauftragten, ergänzt um Owner aus den jeweiligen Fachbereichen. Diese Rollen übernehmen Freigaben, Schulungsplanung und die laufende Aktualisierung der Richtlinie.

Was gehört in eine Meldematrix für KI-Vorfälle?

Eine Meldematrix braucht eine klar benannte erste Meldestelle, definierte Eskalationsstufen und Schnittstellen zu IT-Sicherheit und Datenschutz, wie Anwalt.de beschreibt. Ohne konkrete Eskalationszeiten bleibt sie in der Praxis wirkungslos.

Quellen

Empfehlungen