KI ist längst im Kinderzimmer angekommen – und damit auch Chatbots wie zum Beispiel ChatGPT. Was für viele Kinder eine gute Möglichkeit zu sein scheint, einen Gesprächspartner zu finden und Langeweile zu vertreiben, ist nicht immer so harmlos wie es aussieht. Und manchmal kann das sogar richtig gefährlich werden.
Damit Chatbots uns möglichst schlüssige Antworten geben können, werden sie mit vielen Daten trainiert. Allerdings ist nicht immer eindeutig, welche Daten dafür genutzt wurden. Somit können auch anstößige, gefährdende oder diskriminierende Inhalte generiert werden. Bei einzelnen Anbietern kam es sogar zu Tipps für Essstörungen oder Aufforderungen zum Suizid.
Immer häufiger sieht man außerdem, wie Chatbots für Kinder und Jugendliche mehr werden als bloß KI: Gesprächspartner, Freunde oder sogar ein Ersatz für Psychotherapie – ChatGPT wird zum engen Vertrauten. Das kann nicht nur die soziale Entwicklung von Kindern und Jugendlichen negativ beeinflussen. Es kann auch dazu führen, dass die Kinder bedenkenlos das tun, was die KI ihnen sagt – auch wenn das gefährlich sein sollte.
Grundsätzlich werden KI-Anwendungen mit dem EU AI-Act reguliert. Dieser legt zum Beispiel fest, dass Anbieter KI-Funktionen, ihre Inhalte und auch ihr Training transparent machen müssen. Allerdings ist dieser AI-Act noch nicht vollständig in Kraft getreten und deckt auch nicht konkret alle Anwendungsbereiche von KI ab. Extrembeispiele, wie Suizidaufforderungen bleiben derzeit also noch ohne Folgen für die Anbieter.
Hinzu kommt, dass manche Kinder und Jugendliche die KI bewusst nach derartigen Inhalten fragen. Auch Chatbots, die darauf trainiert werden, solche Inhalte nicht zu generieren, können mit den richtigen Prompts ausgetrickst werden. Auch wenn Entwickler diese Lücken stetig ausbessern, finden Jugendliche immer wieder neue Möglichkeiten, die KI zu manipulieren.
Auch wenn sie Gefahren birgt, muss man KI nicht direkt abschwören. Sinnvoller ist es, Kinder an einen guten Umgang mit solchen Chatbots heranzuführen. So kann das gelingen:
Mehr Informationen rund um die Themen KI und Chatbot, findet man hier:
Oder auch in unserer Themenwelt „Künstliche Intelligenz“