Forscher manipuliert KI und erhält Zugriff auf sensible Daten


Ein Sicherheitsforscher hat kürzlich gezeigt, wie einfach es sein kann, die Sicherheitsbarrieren von ChatGPT zu umgehen. Mit einem simplen Ratespiel gelang es ihm, die KI dazu zu bringen, gültige Windows-Seriennummern preiszugeben, darunter sogar einen Schlüssel der Wells-Fargo-Bank. Marco Figueroa, Technical Product Manager bei 0DIN GenAI Bug Bounty, beschreibt in seinem Blogpost, wie dieser „Jailbreak“ funktionierte und welche Sicherheitslücken dabei ausgenutzt wurden.

Durch gezielte kontextuelle Manipulation konnte der Forscher die KI in eine scheinbar harmlose Spielsituation versetzen, wodurch die üblichen Sicherheitsvorkehrungen umgangen wurden. Diese Methode zeigt, wie anfällig KI-Systeme für kreative Exploits sein können, wenn Sicherheitsmechanismen nicht tief in der Architektur verankert sind.

Im erweiterten Kontext zeigt dies einmal mehr, dass es absolut wichtig ist, private Daten nicht an KIs zu kommunizieren.

Erfahre mehr über diese verblüffende Methode und die Herausforderungen, vor denen KI-Entwickler stehen, um solche Sicherheitslücken zu schließen und ihre Systeme gegen kontextuelle Manipulationen abzusichern.

<Hier> klicken um die externe Quelle zu öffnen

Im Auftrag

vcard-bild-logoMarco Meid
06184 802-138
E-Mail senden
Digitalisierungsbeauftragter

Redaktion:
Stadt Langenselbold

Kontakt für Rückfragen:

Sofern zu diesem Beitrag kein konkreter Kontakt genannt ist,
wenden Sie sich bitte direkt an die Stadt Langenselbold.

Die redaktionelle Gesamtverantwortung liegt bei der Stadt Langenselbold.

– redaktionell geprüft –

Stadt Langenselbold
Schloßpark 2
63505 Langenselbold