Die menschliche Lücke in der KI-Sicherheit

foto magnific

Management Summary

Technologie skaliert schneller als Governance: Unternehmen investieren massiv in größere KI‑Modelle und Rechenleistung, doch Kontrollmechanismen, Verantwortlichkeiten und menschliches Verständnis wachsen nicht im gleichen Tempo mit – ein strukturelles Sicherheitsrisiko.

Mehr Leistung verstärkt bestehende Schwächen: KI beschleunigt Entscheidungen, behebt aber keine Altlasten wie schlechte Datenqualität, unklare Ziele oder schwache Kontrollen – sie skaliert Fehler.

Kontext schlägt Mustererkennung: KI erkennt Muster, aber sichere Entscheidungen erfordern Kontext, Grenzen und menschliches Urteilsvermögen. Ohne diese entsteht ein gefährlicher Wahrheitseffekt durch souverän klingende KI‑Antworten.

Menschliche Expertise ist der Engpass: Wenn Organisationen KI schneller ausrollen, als sie ihre Teams befähigen, entsteht ein gefährliches Ungleichgewicht – Entscheidungen werden schneller, aber nicht besser. Besonders regulierte Branchen sind betroffen.

Drei Leitplanken für sicheren KI‑Einsatz: Präzise Zieldefinition, klare Grenzen und tiefes Verständnis sind entscheidend, um KI in Governance‑ und Sicherheitsstrukturen einzubetten und operative Risiken zu kontrollieren.

 

Unternehmen investieren in größere KI-Modelle, schnellere Hardware und mehr Automatisierung. Doch die entscheidende Frage lautet: Skalieren Governance, menschliches Verständnis und Verantwortlichkeit im gleichen Tempo mit?

 

KI-Systeme werden leistungsfähiger, schneller und breiter einsetzbar. Sie erkennen Muster, analysieren große Datenmengen und liefern Antworten in einer Geschwindigkeit, die vor wenigen Jahren kaum denkbar war. Für Unternehmen eröffnet dies große Chancen, gerade in sicherheitskritischen Bereichen. Gleichzeitig verschiebt sich damit die zentrale Herausforderung. Denn die Sicherheit von KI hängt nicht allein davon ab, wie leistungsfähig ein Modell ist. Entscheidend ist, ob Organisationen die Ergebnisse verstehen, einordnen und verantworten können.

 

Für Matt Wood*, Head of Cyber Security Operations beim Automatisierungsspezialisten ABBYY, liegt genau hier eine der zentralen Aufgaben im Umgang mit KI:

 

Governance, Genauigkeit und Verantwortlichkeit entscheiden darüber, ob KI im Betrieb tatsächlich nützlich ist oder nur beeindruckend wirkt.

In der Cybersicherheit haben KI-Entscheidungen unmittelbare operative Folgen [1]. KI kann helfen, Signale schneller sichtbar zu machen und Risiken früher zu erkennen. Doch sie nimmt Organisationen nicht die Verantwortung ab, Ziele sauber zu definieren, Ergebnisse zu prüfen und die Konsequenzen von Entscheidungen zu tragen.

 

Mehr Leistung verstärkt auch Schwächen

Der Fokus vieler Unternehmen liegt derzeit auf größeren Modellen, schnellerer Hardware und mehr Rechenleistung. Das ist nachvollziehbar, löst aber nicht automatisch die eigentlichen Sicherheitsfragen. Mehr Leistungsfähigkeit behebt keine Schwächen von Altsystemen und keine mangelhafte Datenbasis. Sie kann beides sogar verstärken. Sind Ziele falsch oder unklar, greifen Kontrollen zu locker oder wird Ergebnissen zu sehr vertraut, macht mehr Geschwindigkeit die Entscheidung nicht besser. Sie sorgt nur dafür, dass dieselben Fehler schneller und in größerem Maßstab gemacht werden.

In der Praxis entsteht daraus ein gefährlicher Effekt: KI-Ergebnisse wirken oft überzeugend, strukturiert und sicher formuliert. Gerade deshalb können sie mit belastbarer Wahrheit verwechselt werden. Teams laufen Gefahr, das Falsche zu optimieren oder Risikoentwicklungen zu übersehen. Sie können auch Antworten in operative Prozesse übernehmen, die zwar plausibel erscheinen, aber nicht ausreichend geprüft wurden.

Das eigentliche Problem ist deshalb nicht die reine Modellgröße. Risiko entsteht, wenn technische Leistungsfähigkeit schneller skaliert als Governance, Verständnis und Verantwortlichkeit.

 

Warum Kontext wichtiger ist als Mustererkennung

KI ist stark darin, Muster zu erkennen. Sie kann Ähnlichkeiten identifizieren, Anomalien sichtbar machen und wahrscheinliche nächste Schritte ableiten. Für sichere Entscheidungen braucht es jedoch Kontext, klare Grenzen, Urteilsvermögen und ein Verständnis der möglichen Folgen. Bedeutung entsteht erst aus der Frage, die gestellt wird, aus dem Rahmen, in dem die Antwort bewertet wird, und aus den Grenzen, die vorab definiert wurden. Erst dadurch wird aus einem erkannten Muster ein belastbarer Zusammenhang.

Aus Perspektive der Sicherheit kann ein System fachlich schlüssig klingende Antworten liefern und im praktischen Einsatz dennoch Risiken erzeugen. Etwa dann, wenn ein Risiko an eine Stelle verlagert wird, die niemand ausreichend im Blick hat. Deshalb ist bessere Mustererkennung allein kein Sicherheitsmodell. Sie ist vielmehr eine nützliche Fähigkeit innerhalb eines umfassenderen Systems aus Governance und menschlicher Verantwortlichkeit. Ob Unternehmen diese Muster richtig deuten, kann im praktischen KI-Einsatz über Erfolg oder Scheitern entscheiden.

Schnelle, souverän wirkende Ergebnisse von KI-Tools können mit Wahrheit verwechselt werden. Genau deshalb braucht KI im Sicherheitskontext menschliches Urteilsvermögen. Der Mensch entscheidet, was relevant ist, welche Risiken akzeptabel sind und wann eine Antwort hinterfragt werden muss.

In der Cybersicherheit geht es um Konsequenzen. Rechenleistung kann Geschwindigkeit und Leistungsfähigkeit erhöhen. Doch der Mensch muss festlegen, welche Maßnahmen gerechtfertigt sind und wer die Verantwortung für die Folgen trägt.

 

Wenn Expertise nicht mitwächst

Besonders kritisch wird es, wenn Unternehmen KI skalieren, ohne gleichzeitig die menschliche Expertise zu stärken. Dann entsteht ein Ungleichgewicht: Die Technologie wird schneller, breiter einsetzbar und überzeugender. Die Menschen, die mit ihr arbeiten, bleiben aber möglicherweise unsicher darin, KI-Ausgaben einzuordnen, zu prüfen und zu interpretieren.

In der Folge vertrauen Organisationen auf Ergebnisse, die sie nicht vollständig verstehen. Das kann bedeuten, dass schlechte Entscheidungen früher getroffen werden, in größerem Maßstab wirken und mit mehr Vertrauen umgesetzt werden, als gerechtfertigt wäre. Die Stärkung menschlicher Expertise sorgt dafür, dass Leistungsfähigkeit an Urteilsvermögen gebunden bleibt, statt unkontrolliert abzudriften.

Gerade für stark regulierte Branchen wie den Finanzdienstleistungssektor ist das entscheidend. Sicherheits- und Compliance-Teams müssen gewährleisten, dass KI-Modelle auditierbar und nachvollziehbar bleiben. Nur so lassen sich regulatorische Anforderungen erfüllen, die sich mit dem zunehmenden KI-Einsatz weiterentwickeln.

 

Drei Leitplanken für den sicheren KI-Einsatz

Für Unternehmen, die KI sicher skalieren wollen, sind die Leitplanken Präzision, Grenzen und Verständnis entscheidend.

  • Präzision bedeutet, genau zu definieren, was ein System optimieren soll. Je unschärfer die Zielsetzung ist, desto größer ist das Risiko, dass KI zwar effizient arbeitet, aber in die falsche Richtung optimiert. Gerade in der Cybersicherheit reicht es nicht, ein System allgemein nach Auffälligkeiten suchen zu lassen. Es muss klar sein, welche Risiken adressiert werden, welche Prioritäten gelten und welche Entscheidungen aus den Ergebnissen folgen können.
  • Grenzen sind ebenso wichtig. Unternehmen müssen ausdrücklich festlegen, was ein System nicht tun darf. Diese Grenzen betreffen technische Funktionen ebenso wie rechtliche Vorgaben und organisatorische Verantwortlichkeiten. KI kann Entscheidungsprozesse nur dann sinnvoll unterstützen, wenn Verantwortlichkeiten, Risikotoleranzen und regulatorische Anforderungen eindeutig geklärt sind.
  • Verständnis ist die dritte Leitplanke. Menschen, die mit KI arbeiten, müssen Antworten nicht nur lesen, sondern tatsächlich verstehen können, um Annahmen, Lücken und Unsicherheiten zu erkennen. Nur dann können sie beurteilen, ob ein Ergebnis belastbar ist oder weiter geprüft werden muss.

Diese Leitplanken verhindern, dass technische Leistungsfähigkeit der organisatorischen Kontrolle davonläuft. Sie halten KI innerhalb einer Struktur, die Menschen steuern, hinterfragen und verantworten können.

 

Was sichere KI ausmacht

Künftig wird es darauf ankommen, KI als festen Bestandteil von Entscheidungs-, Sicherheits- und Compliance-Strukturen zu führen. Unternehmen müssen Zuständigkeiten klären, Prüfprozesse etablieren und Teams befähigen, Ergebnisse im jeweiligen Fachkontext zu bewerten.

Wer KI auf diese Weise einbettet, etabliert ein Betriebsmodell, in dem Geschwindigkeit, Governance und menschliches Urteilsvermögen zusammenwirken. So wird KI zu einem verlässlichen Bestandteil des Unternehmensalltags – nicht nur zu einem System, das überzeugende Antworten liefert.

 

[1] https://internationalsecurityjournal.com/all-security-news/?e-filter-266745f-category=cybersecurity

 

Foto (c) ABBYY

* Matt Wood ist Global Head of Cyber Operations bei ABBYY und verantwortet die strategische Steuerung sowie den operativen Schutz der globalen Sicherheitslandschaft des Unternehmens. Er ist darauf spezialisiert, komplexe Cyberrisiken in klare, entscheidungsfähige Handlungsoptionen für Führungsteams zu übersetzen und Organisationen in die Lage zu versetzen, Risiken fundiert zu steuern. Mit langjähriger Erfahrung in Cybersecurity, AI Security und globalen Security‑Operations‑Strukturen verbindet er technische Tiefe mit strategischer Führungskompetenz.

 

9285 Artikel zu „KI Sicherheit“

Anwendungssicherheit und KI: Was AppSec-Teams ihre KI wirklich fragen

Was würden AppSec-Teams wohl eine nahezu allwissende Entität fragen? Die Antwort darauf kennt Cycode. Der Pionier im Bereich Application Security Posture Management (ASPM) hat die ersten 100 Konversationen der Nutzer von Maestro, einem elaborierten KI-Agenten für die Anwendungssicherheit ausgewertet und aus ihnen die sechs häufigsten Fragen destilliert.   KI-Agenten sind in vielen Unternehmensbereichen auf dem…

Cybersicherheit: Lohnt sich der KI-Aufwand für kleine Sicherheitsteams?

Kurzfazit KI bringt Nutzen, wenn sie konkrete Engpässe adressiert (z. B. Priorisierung, Triage, Mustererkennung) und sauber in Prozesse eingebettet ist. Viele »KI«-Funktionen erzeugen sonst vor allem Zusatzaufwand: neue Workflows, mehr Komplexität und mehr Pflegebedarf. Für KMU sind zwei Wege realistisch: gezielte Integration in die eigene Security-Toolchain oder Auslagerung an einen MDR-Anbieter – jeweils mit klaren Prüffragen…

Data Security Posture Management: Datensicherheit mit KI – Sensible Informationen automatisch finden und schützen

Moderne DSPM-Lösungen verschaffen Unternehmen Transparenz über ihre sensiblen Daten und die Risiken, denen sie ausgesetzt sind. Eine Schlüsselrolle spielt dabei KI: Sie ermöglicht es, große und verteilte Datenbestände weitgehend automatisiert zu klassifizieren.

Verhaltensanalysen für KI-Agenten in Cloud-Umgebungen: Transparenz und Anomalieerkennung als Sicherheitsfaktor

Wie Security-Teams autonome Software-Agenten über den Lebenszyklus hinweg beobachten, Normalverhalten modellieren und Abweichungen frühzeitig erkennen können.   Mit der zunehmenden Verbreitung von KI-Agenten in Unternehmen entsteht eine neue Herausforderung für die IT-Sicherheit: Autonome Systeme handeln eigenständig, interagieren miteinander und greifen auf Daten sowie Dienste zu – häufig bei eingeschränkter Nachvollziehbarkeit von Entscheidungen und Aktionen. Klassische…

LLM prägt das Zusammenspiel von Analyse, Automatisierung und Nutzerverhalten neu – KI verändert E-Mail-Sicherheit und Awareness

Generative künstliche Intelligenz entwickelt sich rasant zu einem bestimmenden Faktor der Cybersicherheit. Während Angreifer Sprachmodelle nutzen, um täuschend echte Phishing-Nachrichten in großer Zahl zu erzeugen, reagieren Sicherheitsanbieter mit neuen Analyseverfahren, automatisierter Kontextbewertung und verhaltensorientierten Schulungskonzepten.

Vorbereitung auf offensive KI: Neue Anforderungen an die Sicherheitsbewertung von IT‑Infrastrukturen

Die rasante Entwicklung offensiver künstlicher Intelligenz verändert die Bedrohungslandschaft für Unternehmen grundlegend. Autonome Systeme sind inzwischen in der Lage, digitale Umgebungen selbstständig zu analysieren, Schwachstellen zu identifizieren und Exploits nahezu ohne menschliches Zutun zu entwickeln. Dadurch verkürzen sich Entwicklungs- und Angriffszyklen erheblich – von ehemals Monaten auf teilweise nur noch wenige Tage. Klassische Sicherheitsansätze geraten…

KI entdeckt jahrzehntealte Sicherheitslücken. Der Wendepunkt für Cybersecurity

  Kommentar von Heather Ceylan, CISO at Box Mit Claude Mythos hat Anthropic ein KI-Modell vorgestellt, das in der Lage ist, tief in Codebasen einzutauchen und selbst hochkomplexe, bislang unentdeckte Schwachstellen aufzuspüren. Zwischen 16 und 27 Jahre alte Bugs und Schwachstellen, die in zentraler Infrastruktur existierten und weder durch menschliche Experten noch durch bestehende Tools…

Cyberrisiko Digitalisierung und KI – warum Identitäten zum zentralen Sicherheitsfaktor in Kliniken werden

Statement zur DMEA 2026 von Olaf Milde, Manager Solutions Engineering Central Europe bei Imprivata   Mit der wachsenden digitalen Vernetzung der Akteure im Gesundheitswesen und dem Einsatz von KI-Agenten steigt auch die Angriffsfläche für Cyberkriminelle. Krankenhäuser gelten heute als besonders attraktive Ziele für Angreifer: Sie verarbeiten hochsensible Patientendaten, betreiben komplexe IT-Infrastrukturen und sind gleichzeitig auf…

Warum KI das klassische Sicherheitsmodell aushebelt

KI beschleunigt Angriffe schneller, als klassische Sicherheitsmodelle reagieren können. Warum Erkennung und Reaktion nicht mehr ausreichen – und weshalb Eindämmung zur entscheidenden Disziplin für Unternehmenssicherheit wird.   Jahrelang war »assume a breach«, also »von einem Sicherheitsvorfall auszugehen« eine nützliche Denkweise in der Sicherheit, um eine bessere Erkennung und Reaktion zu fördern. Mit Initiativen wie Project…

70 Prozent der Unternehmen genehmigen KI-Projekte trotz Sicherheitsbedenken

Jeder sechste Entscheider in Deutschland stuft Besorgnis als »extrem« ein – und wurde dennoch zugunsten von Wettbewerbsdruck und internen Forderungen übergangen.   TrendAI, ein Geschäftsbereich von Trend Micro und Anbieter von KI-Sicherheit, veröffentlicht neue Forschungsergebnisse, die zeigen, dass Unternehmen weltweit den Einsatz von künstlicher Intelligenz vorantreiben, obwohl bekannte Sicherheits- und Compliance-Risiken bestehen [1]. Eine neue…

Lage der Cybersicherheitsexperten bleibt trotz KI angespannt – Hochmotivierte Teams sichern am besten

Cybersecurity gehört zu den abwechslungsreichsten, spannendsten, aber auch anstrengendsten Berufsfeldern. Die Nonprofit-Organisation für Cybersecurity-Experten ISC2 führt jedes Jahr eine Studie durch, die diesen ­Bereich sowohl aus Sicht der Mitarbeitenden als auch aus der Perspektive der Unternehmen weltweit ­beleuchtet. »manage it« hat anlässlich der neuesten Workforce-Studie mit Casey Marks, Chief Operating Officer bei ISC2 über die deutschen Studienergebnisse gesprochen.

Enterprise-KI made in Germany: Neue Maßstäbe für Produktivität und Sicherheit

Startup Aiconiq.io maximiert KI-Wirkung auf Kosten und Erträge durch unternehmensindividuelles KI-Hirn.   Mit Aiconiq.io startet ein deutsches KI-Unternehmen, das künstliche Intelligenz konsequent als Produktivitäts- und Kostensenkungsfaktor versteht: Die Enterprise-KI von Aiconiq.io stellt den wirtschaftlichen Nutzen ins Zentrum. Das Herzstück der KI-Innovation von Aiconiq.io ist das patentierte »Corporate Brain« – eine unternehmensindividuelle KI-Wissensbasis. Mit seinem Wissen…

KI beschleunigt Cyberangriffe – Unternehmen müssen Sicherheit neu denken

Cyberangreifer nutzen vor allem grundlegende Schwächen im Identitäts‑ und Zugriffsmanagement aus und gehen mit Hilfe von KI schneller, skalierbarer und automatisierter vor. Unternehmen wird geraten, mit einer »Shift‑Left«-Strategie frühzeitig auf KI‑gestützte Sicherheit, Identität als kritische Infrastruktur und kontinuierliche Risiko‑ und Schwachstellenbewertung zu setzen. Besondere Priorität haben dabei die Absicherung von Identitäten, Anwendungen, Lieferketten und KI‑Plattformen…

Sicherheitslücken exponieren Unternehmen: KI-gesteuerte Angriffe nehmen zu

IBM hat den 2026 X-Force Threat Intelligence Index veröffentlicht, aus dem hervorgeht, dass Cyberkriminelle grundlegende Sicherheitslücken in dramatisch höherem Maße ausnutzen, was nun durch KI-Tools beschleunigt wird, mit denen Angreifer Schwachstellen schneller als je zuvor identifizieren können [1]. IBM X-Force beobachtete einen Anstieg von 44 % bei Angriffen, die mit der Ausnutzung öffentlich zugänglicher Anwendungen…

So ticken KI-Agenten für Cybersicherheit wirklich ​

Immer mehr Security Operation Centers (SOC) setzen im Kampf gegen Hacker und Downtimes auf die Hilfe künstlicher Intelligenz. KI-Agenten, die wie SOC-Teams miteinander autonom kollaborieren, sind in diesem Zusammenhang die neueste Evolutionsstufe. Ontinue, der führende Experte für Managed Extended Detection and Response (MXDR), wirft einen Blick unter die Haube solcher Multi-Agenten-Systeme.   Multi-Agenten-Systeme (MAS), bestehend…

Cloudspeicher und KI: Sicherheitsfunktionen zwischen Anspruch und Realität

Cloudspeicher können sich perspektivisch zu intelligenten Assistenzsystemen entwickeln. KI-gestützte Frühwarnmechanismen und automatisierte Sicherheitsfunktionen gelten dann als zentrale Bausteine für Vertrauen und digitale Souveränität.   Plötzlich sind die Daten aus dem Cloudspeicher weg. Das Fotoarchiv ist verschwunden, die Diplomarbeit gelöscht oder die Präsentation für den nächsten Tag nicht aufzufinden. Was ist passiert? Jemand hat es geschafft,…

Cybersicherheit: Zwischen KI-Gefahr, Lieferketten-Risiken und Passkey-Revolution

Wie wird die Cybersicherheitslandschaft im Jahr 2026 und in der Zukunft aussehen?   Auch im Jahr 2026 wird sich das Schlachtfeld der Cybersicherheit weiterentwickeln. Internetnutzer und Unternehmen werden einer Vielzahl von Bedrohungen und Herausforderungen gegenüberstehen. Karolis Arbaciauskas, Produktleiter des Cybersicherheitsunternehmens NordPass, gibt uns einen Expertenausblick auf das laufende Jahr. »Künstliche Intelligenz wird sowohl die Tools…

Digitale Souveränität, Sicherheit, KI: Wie sich Europas IT-Strategien neu ausrichten 

Unternehmen in Europa stehen vor einem Dilemma: Entweder sie halten am Status quo fest und riskieren eine folgenschwere Abhängigkeit von einzelnen Anbietern – oder sie akzeptieren die tiefgreifenden technologischen Veränderungen und machen ihre IT wirklich zukunftsfähig. Das Festhalten an proprietären Single‑Vendor‑Lösungen ist längst nicht mehr nur eine Frage der Technologie. Es ist ein finanzielles Risiko und kann zur Bedrohung für das…

KI-gestützte Ausfallsicherheit: Die Zukunft des Site Reliability Engineering

Die Integration von KI in das Site Reliability Engineering revolutioniert die Arbeitsweise von SRE-Teams, indem sie von reaktiver Problemlösung zu proaktiver Systemoptimierung übergehen. KI automatisiert nicht nur repetitive Aufgaben wie Patch-Management und Log-Analyse, sondern ermöglicht auch eine vorausschauende Fehlerdiagnose und effizienteres Incident Management. Entscheidend für den Erfolg ist jedoch, dass KI als strategischer Partner eingesetzt…

Eine neue Klasse operativer und sicherheitsrelevanter Risiken: KI-Agenten

OWASP hat erstmals die Top 10 for Agentic Applications veröffentlicht. Der Bericht macht deutlich, welche erheblichen geschäftlichen Risiken von agentischer KI ausgehen können – insbesondere, weil diese Systeme eigenständig Entscheidungen treffen und ohne menschliches Eingreifen handeln [1].   Dazu ein Kommentar von Keren Katz, Co-Lead, OWASP Agentic AI Project; Senior Group Manager of AI Security,…