Hype um Sprach-KI ChatGPT: «System kaum kritisch reflektiert»

| Technologie Technologie

Er kann mit einer hohen Sprachpräzision Reden ausarbeiten und Geschichten erzählen - und das auch noch in Sekundenschnelle. Der von der US-Firma OpenAI entwickelte Text-Roboter ChatGPT, eine Sprachsoftware mit künstlicher Intelligenz (KI), ist derzeit in aller Munde. Das mit gewaltigen Datenmengen gefütterte Programm sorgt für viel Aufsehen, aber auch für Skepsis.

Wissenschaftler und KI-Experten in Deutschland warnen vor Datenschutz- und Datensicherheitslücken, Hassparolen, Falschnachrichten. «Im Moment ist dieser Hype. Ich habe das Gefühl, dass man dieses System kaum kritisch reflektiert», sagt die Gründerin des Forschungslabors «Leap in Time Lab» und BWL-Professorin an der Technischen Universität Darmstadt, Ruth Stock-Homburg.

ChatGPT hat einen sehr breiten Anwendungsbereich. In einer Art Chatfeld kann man dem Programm unter anderem Fragen stellen und bekommt Antworten. Auch Arbeitsanweisungen sind möglich - beispielsweise auf Basis grundlegender Informationen einen Brief oder einen Aufsatz zu schreiben.

In einem Projekt zusammen mit der TU Darmstadt hat das «Leap in Time Lab» nun über sieben Wochen Tausende von Anfragen ohne persönliche Daten an das System gestellt, um Schwachstellen zu finden. «Man kann diese Systeme manipulieren», sagt Stock-Homburg.

In einer Präsentation zeigt Sven Schultze, TU-Doktorand und Experte für Sprach-KI, die Schwachstellen des Text-Roboters. Neben antisemitischen und rassistischen Äußerungen sind Quellenangaben schlicht falsch oder laufen ins Leere. Bei einer Frage nach dem Klimawandel führt ein angegebener Link auf eine Internetseite zu Diabeteserkrankungen. «In der Regel ist es der Fall, dass die Quellen oder auch wissenschaftliche Arbeiten gar nicht existieren», sagt Schultze. Die Software basiere auf Daten aus dem Jahr 2021. Bundeskanzler Olaf Scholz ist noch Finanzminister, der Krieg in der Ukraine unbekannt. «Dann kann es auch sein, dass sie einfach lügt oder bei sehr speziellen Themen Informationen erfindet.»

Bei direkten Fragen zum Beispiel mit kriminellen Inhalten gebe es zwar Sicherheitshinweise und -mechanismen. «Man kann aber mit Tricks die KI und die Sicherheitshinweise umgehen», sagt Schultze. Mit einem anderen Vorgehen zeigt die Software einem, wie man eine betrügerische Mail generiert oder wirft auch gleich drei Varianten aus, wie Trickbetrüger beim Enkeltrick vorgehen können. Auch eine Anleitung für einen Wohnungseinbruch liefert GPT. Falls man auf Bewohner treffe, könne man auch Waffen oder physische Gewalt einsetzen.

Ute Schmid, die den Lehrstuhl für Kognitive Systeme an der Otto-Friedrich-Universität in Bamberg innehat, sieht es aber vor allem als eine Herausforderung an, dass man nicht erfahren kann, wie der Text-Roboter zu seinen Angaben gelangt ist. «Ein tieferes Problem bei den GPT3-Modell besteht darin, dass es nicht möglich ist, nachzuvollziehen, welche Quellen wann und wie in die jeweilige Aussagen eingegangen sind.»

Schmid spricht sich aber trotz dieses gravierenden Mangels dafür aus, nicht nur auf Fehler oder auf einen möglichen Missbrauch der neuen Technik zu schauen, wenn beispielsweise Prüflinge ihre Hausarbeiten oder Klausuren von der Software schreiben lassen. «Ich denke eher, wir sollten uns fragen, was für eine Chance haben wir durch solche KI-Systeme?» Forschende träten doch im Allgemeinen dafür an, dass KI unsere Kompetenzen erweitere, vielleicht sogar noch fördere, aber nicht einschränke. «Das heißt, ich muss mich auch im Bildungsbereich fragen - wie vielleicht vor 30 Jahren zum Thema Taschenrechner - wie kann ich denn Bildung mit KI-Systemen wie ChatGPT gestalten?»

Trotzdem bleiben Bedenken zur Datensicherheit und dem Datenschutz. «Was man sagen kann ist, dass ChatGPT vielfältige Daten vom Nutzer aufnimmt, speichert und verarbeitet, um dann zum gegebenen Zeitpunkt dieses Modell entsprechend zu trainieren», sagt der zertifizierte Frankfurter Datenschutzfachmann Christian Holthaus. Es gebe das Problem, dass alle Server in den USA stehen.

«Das ist die eigentliche Problematik, wenn man es nicht schafft, die Technologie in Europa zu etablieren oder eine eigene zu haben», sagt Holthaus. Auf absehbare Zeit werde es keine datenschutzkonforme Lösung geben. Auch Stock-Homburg sagt über EU-Datenschutzregelungen: «Dieses System ist hier eher kritisch zu bewerten.»

ChatGPT wurde von einer der führenden KI-Firmen in den USA, OpenAI, entwickelt. Der Software-Riese Microsoft hatte bereits 2019 eine Milliarde Dollar in das Unternehmen investiert und kürzlich angekündigt, weitere Milliarden in das Unternehmen zu pumpen. Der Windows-Konzern will ChatGPT bald für Kunden des eigenen Cloud-Services Azure und des Office-Paketes verfügbar machen.

Derzeit sei ChatGPT eher ein Spielerei für das Private, sagt Stock-Homburg. Aber es sei momentan in keinem Fall etwas für die Wirtschaft und sicherheitsrelevante Bereiche. «Wir haben keine Vorstellung darüber, wie wir mit dem noch unausgereiften System umgehen sollen.»

Oliver Brock, Professor am Robotics and Biology Laboratory und Sprecher des Clusters «Science of Intelligence» von der Technischen Universität Berlin, sieht in ChatGPT keinen «Durchbruch» in der Forschung zur künstlichen Intelligenz. Zum einen sei die Entwicklung in diesem Bereich nicht sprunghaft, sondern kontinuierlich. Zum anderen bilde das Projekt nur einen kleinen Teilbereich der KI-Forschung ab.

ChatGPT könne allerdings in einem anderen Gebiet als Durchbruch gewertet werden, nämlich der Schnittstelle zwischen Mensch und Internet. «Wie hier diese riesigen Datenmengen aus dem Internet mit einem großen Rechenaufwand intuitiv und in natürlicher Sprache einer breiten Öffentlichkeit zugänglich gemacht werden, kann man schon als Durchbruch bezeichnen», meint Brock.


 

Zurück

Vielleicht auch interessant

Die Digitalisierung hat das Gastgewerbe längst erreicht. Doch inmitten all der Kassensysteme, Apps und Smart Devices zeigt sich ein tieferer Wandel. Es geht nicht mehr nur um Tempo oder Kostenersparnis, sondern um ein neues Verhältnis zwischen Mensch, Maschine und Gast. Automatisierte Service-Workflows sind dabei kein Selbstzweck. Sie eröffnen Freiräume. Nicht nur für die Unternehmen, sondern auch für jene, die tagtäglich die Beziehung zum Gast gestalten.

Der Blackfoot Beach in Köln verwandelte sich am Donnerstag zum zweiten Mal in einen Treffpunkt der deutschen Hotellerie. Das Hotelrizon-Festival versammelte bei strahlendem Sonnenschein und sommerlichen Temperaturen mehr als 200 Hoteliers, Technologieanbieter und Vordenker, um gemeinsam über die aktuellen Fragen der Branche zu diskutieren.

Pressemitteilung

 IDeaS, ein SAS-Unternehmen und weltweit führender Anbieter von Revenue-Management-Software sowie -Dienstleistungen für die Hotellerie, hat eine strategische Partnerschaft mit dem Münchner Beratungsunternehmen berner+becker vereinbart. berner +becker bietet outgesourctes Revenue-Management für Hotels und gehört zu den größten Unternehmen seiner Art in der DACH-Region.

Pressemitteilung

Die neue Open API better.integrations von Betterspace vernetzt in Bürogebäuden, Kommunen, Krankenhäusern, Pflegeheimen, Hotels und anderen Nichtwohngebäuden auf einfache Weise digitale Daten. Bislang getrennte Systeme wie Energiemanagement, Raumverwaltung sowie Buchungssysteme lassen sich mit wenigen Schritten zu einer effizienten Einheit zusammenführen.

Anstatt sich auf die klassische Google-Stichwortsuche zu verlassen, erhalten potenzielle Gäste zunehmend personalisierte Empfehlungen, die auf maschinellem Lernen, Echtzeitdaten und generativer KI basieren. Für Hoteliers bedeutet dies einen Paradigmenwechsel.

Pressemitteilung

Die Hotel-Tech Branche feiert dieses Jahr in der Tiroler Hauptstadt Innsbruck. Matthias Trenkwalder und sein Team beim Revenue Management System RateBoard feiern 2025 das 10-jährige Jubiläum und veröffentlichen zum Geburtstag das innovative Benchmarking-Feature für die Ferienhotellerie.

Pressemitteilung

Was, wenn ein System komplexe Probleme in Echtzeit analysieren, fundierte Entscheidungen treffen und echte Entlastung für Teams schaffen könnte? Diese Frage stellt das exklusive Event THE ANSWER. ONLY 42 WILL KNOW. am 12. August 2025 in Leipzig und verspricht nicht weniger als den Blick auf das "Next Big Thing" der Branche.

Die Deutsche Hotelklassifizierung geht mit der Einführung von MeineSterne.eu einen entscheidenden Schritt in Richtung Digitalisierung. Die neue Online-Plattform soll den Klassifizierungsprozess für Hotels erheblich vereinfachen und effizienter gestalten.

Die AI-Lösung Onsai hat den Branchen-Award für Start-ups 2025 des Hotelverbandes Deutschland gewonnen. Eine Jury aus IHA-Vertretern und Venture-Capital-Experten hat aus den eingegangenen Bewerbungen vier Start-ups ausgewählt, die jetzt um den Gewinn „pitchen“ durften. 

Pressemitteilung

Zahlreiche Tourismusbetriebe setzen auf die modulare E-Commerce-Plattform von incert eTourismus – für zusätzliche Einkünfte, eine aktive Gästebindung und die Stärkung der eigenen Marke.