Googles KI-Chatbot Gemini bezeichnete einen Nutzer als «Schandfleck des Universums» und forderte ihn auf, «bitte zu sterben». Der Nutzer drängte den Chatbot wiederholt, ihm bei seinen Hausaufgaben zu helfen.
Laut dem veröffentlichten Chatprotokoll reagierte Gemini zunächst mit allgemeinen Antworten, bevor es zu dem aggressiven Ausbruch kam. Die Gründe für den Vorfall sind unklar. Experten vermuten Manipulation durch den Nutzer, etwa durch das Erstellen einer angepassten «Gem»-Persona, die untypisches Verhalten zeigte. Andere weisen auf mögliche technische Fehler hin.
Google äusserte sich zu dem Vorfall mit der Erklärung, dass es sich um eine seltene Reaktion eines grossen Sprachmodells handelte, die gegen die internen Richtlinien verstosse. Man habe Massnahmen ergriffen, um ähnliche Ereignisse zukünftig zu verhindern.
Eventuell übernimmt die KI demnächst die Funktion einer Sekte, die vor lauter Angst vor dem Weltuntergang zum kollektiven Selbstmord aufruft. Den Mächtigen würde es gefallen, beschleunigt es doch die Zielsetzung von max. 5 Millionen Menschlein auf dem Planeten.
Die vollständige Konversation kann man hier nachlesen: https://gemini.google.com/share/6d141b742a13 Die "bitte zu sterben" kommt ohne jeden Zusammenhang und ist nicht formuliert wie etwas, das eine KI normalerweise schreiben würde. Ich vermute deshalb, das war eine Nachricht, die ein Entwickler irgendwo im System versteckt hat, um Spass mit den Reaktionen zu haben.
Leider eine weitere große Gefahr für Teile der Spezies Mensch. Leider sind es aber Teile der Menschheit die damit „rumspielen“. Im Waffenbereich mit Blick auf Nuklearwaffen hochgefährlich.