Lernen, gegen Halluzinationen zu kämpfen: Ein Start-up des MIT bringt der KI bei, ihre Grenzen zu erkennen

Publié le 23 Juni 2025 à 20h04
modifié le 23 Juni 2025 à 20h05

Der rasante Aufstieg der künstlichen Intelligenz wirft gewaltige Fragen auf. Die *Halluzinationen*, die von diesen Systemen erzeugt werden, vernachlässigen oft die wesentlichen Grenzen ihrer eigenen Analysefähigkeit. Diese *Urteilsfehler* könnten entscheidende Entscheidungen gefährden, insbesondere in Bereichen wie der Gesundheit. Das Start-up Themis AI, das aus dem renommierten MIT hervorgegangen ist, positioniert sich an der Spitze dieser Problematik. Sein Ziel ist es, der KI beizubringen, ihre eigenen *Unsicherheiten* zu erkennen und irreführende Vorhersagen zu vermeiden. Diese intellektuelle Herausforderung, die lange vernachlässigt wurde, erweist sich als grundlegend für den Aufbau verantwortungsvollerer und zuverlässigerer Systeme.

Der Aufstieg von Themis AI

Themis AI, ein innovatives Start-up aus dem MIT, konzentriert sich auf eine grundlegende Herausforderung: den Systemen der künstlichen Intelligenz beizubringen, ihre eigenen Grenzen zu erkennen. Die KI-Modelle, die häufig eine Überconfidence aufweisen, können fatale Fehler erzeugen, insbesondere in kritischen Kontexten wie der Gesundheit.

Ein dringender Bedarf an Regulierung

Der Aufstieg der von KI erzeugten Halluzinationen bringt wachsende Risiken mit sich. Je mehr diese Technologien in entscheidende Entscheidungen, wie die Entwicklung von Behandlungen für Krebs, integriert werden, desto wichtiger wird ein Alarmmechanismus. Capsa, die Plattform von Themis, führt einen Überprüfungsmechanismus ein, der es der KI ermöglicht, Unsicherheitsmomente anzuzeigen. Dieser Prozess hilft den KI-Modellen, ihren eigenen Grad an Zuversicht zu hinterfragen.

Eine innovative Technologie

Seit ihrer Gründung im Jahr 2021 durch Professorin Daniela Rus hat Themis AI ein Werkzeug entwickelt, das in zahlreiche KI-Systeme integriert werden kann. Dieses System kann Anzeichen von Verwirrung, Voreingenommenheit oder unvollständiger Datenverarbeitung erkennen, die oft die Ursache für Halluzinationen sind. Sektoren wie Telekommunikation und die Ölindustrie haben bereits von dieser Technologie profitiert.

Praktische Anwendungen

Themis AI hat es geschafft, kostspielige Fehler bei der Planung von Netzen für Telekommunikationsanbieter zu vermeiden und Unternehmen im Ölsektor zu helfen, komplexe seismische Daten zu analysieren. Diese Erfolge demonstrieren die Bedeutung von Innovationen im Management der mit KI verbundenen Risiken.

Ein präventiver Ansatz für KI

Die Forschung, die am MIT begonnen wurde, hat eine wesentliche Frage beantwortet: Wie kann man einer Maschine die Fähigkeit verleihen, ihre eigenen Fehler zu erkennen? Der Fokus lag auf der Erkennung von Rassen- und Geschlechtervorurteilen in Gesichtserkennungssystemen. Durch die Neuausbalancierung der Trainingsdaten hat Themis nicht nur Probleme identifiziert, sondern auch Lösungen angeboten.

Optimierung der Gesundheitsversorgung und der pharmazeutischen Forschung

Die potenziell revolutionären Anwendungen dieses Ansatzes zeigen sich im Bereich der Medikamentenentdeckung. Die KI-Systeme sind nun in der Lage, Behandlungen zu bewerten und dabei anzugeben, wann ihre Vorhersagen auf robusten Beweisen oder lediglich auf Hypothesen basieren. Die Pharmaindustrie profitiert bereits von dieser Bewertungsfähigkeit und optimiert damit Zeit und Ressourcen.

Verbesserung von Geräten mit begrenzter Kapazität

Geräte mit begrenzten Ressourcen können ebenfalls von den Fortschritten von Themis profitieren. Dank angepasster Technologien sind diese Geräte in der Lage, Aufgaben lokal effizienter auszuführen und benötigen die Unterstützung leistungsstarker Server nur bei Bedarf.

Die ethischen Implikationen der KI

Die wachsende Präsenz von KI in kritischen Sektoren erfordert eine tiefgehende ethische Reflexion. Die Fähigkeit, Unsicherheit zu erkennen, könnte ein entscheidender Vorteil sein. Andere Unternehmen wie IBM und Roche beschäftigen sich ebenfalls mit KI zur Diabetesbehandlung, was den Weg zu einer personalisierteren Medizin ebnet.

Zukunftsperspektiven

Während Themis AI weiterhin in seiner Mission voranschreitet, wird die Schnittstelle zwischen KI und Ethik zunehmend relevant. Der Fokus auf das Erkennen von Grenzen wird es ermöglichen, Standards für Exzellenz in der KI in verschiedenen Bereichen zu etablieren.

Häufig gestellte Fragen

Was sind die Halluzinationen von KI und warum sind sie besorgniserregend?
Die Halluzinationen von KI beziehen sich auf Fälle, in denen Systeme der künstlichen Intelligenz falsche Informationen erzeugen oder auf Vermutungen basieren, anstatt auf zuverlässigen Daten. Dies wird besorgniserregend, wenn diese Systeme entscheidende Entscheidungen treffen, wie im Rahmen medizinischer Behandlungen oder der Verkehrssicherheit.

Wie trägt Themis AI dazu bei, die Halluzinationen von KI zu reduzieren?
Themis AI nutzt seine Plattform Capsa, um den KI-Systemen beizubringen, ihre eigenen Unsicherheiten zu erkennen und anzugeben, wann sie sich bei einer Antwort unsicher sind, wodurch kostspielige und potenziell gefährliche Fehler vermieden werden.

Welche Arten von KI-Systemen können von der Technologie von Themis profitieren?
Die Plattform Capsa ist so konzipiert, dass sie sich mit praktisch jedem KI-System integrieren lässt, einschließlich solchen, die in der Telekommunikation, der Öl- und Gasexploration sowie Chatbots verwendet werden, um deren Genauigkeit und Zuverlässigkeit zu verbessern.

Warum ist es wichtig, dass KI ihre Grenzen erkennt?
Es ist entscheidend, dass KI ihre Grenzen erkennt, da dies hilft, Entscheidungen zu vermeiden, die auf falschen Annahmen basieren, insbesondere in Bereichen, in denen schwerwiegende Konsequenzen auftreten können, wie in der Medizin oder beim autonomen Fahren.

Welchen Einfluss hatten die Arbeiten von Themis AI auf die Pharmaindustrie?
Themis AI hat gezeigt, wie ihr Ansatz die Medikamentenentdeckung transformieren kann, indem sie den KI-Systemen ermöglicht, solide Vorhersagen von einfachen Vermutungen zu unterscheiden, wodurch Zeit und Kosten bei der Suche nach neuen Medikamenten reduziert werden.

Wie wurde Themis AI gegründet und wie ist ihr Weg verlaufen?
Themis AI wurde 2021 von der MIT-Professorin Daniela Rus und ihren Kollegen gegründet. Ihr Weg begann mit Forschungen, die darauf abzielten, KI-Systeme zuverlässiger zu machen, und entwickelte sich weiter, um Probleme von Vorurteilen und Unsicherheiten in verschiedenen Sektoren anzugehen.

Ist die Technologie von Themis für Geräte mit geringer Leistung geeignet?
Ja, die Technologie von Themis AI ist darauf optimiert, mit Geräten zu arbeiten, die über begrenzte Rechenleistung verfügen, sodass sie Aufgaben effizient lokal ausführen können, während sie bei Bedarf Unterstützung von Servern anfordern.

Wie beeinflusst die Forschung von Themis AI zu Vorurteilen die Wahrnehmung von KI?
Durch die Entwicklung einer Technologie, die Vorurteile in KI-Systemen begrenzt, trägt Themis AI zu einer positiveren und vertrauenswürdigeren Wahrnehmung von KI bei, was für ihre Integration in kritische Bereiche entscheidend ist.

Was sind die Risiken einer KI, die ihre Grenzen nicht erkennt?
Die Risiken umfassen riskante Entscheidungen, die auf falschen Informationen beruhen, was zu schweren Konsequenzen führen kann, wie medizinischen Fehlern, Verkehrsunfällen oder finanziellen Verlusten für Unternehmen.

Was sind die jüngsten Fortschritte in der Technologie von Themis AI?
Themis AI veröffentlicht weiterhin Forschungsergebnisse zur Verbesserung der Genauigkeit von Chatbots und zur Anwendung ihrer Technologien in verschiedenen Sektoren und unterstreicht ihr Engagement, KI zuverlässiger und verantwortungsbewusster zu gestalten.

actu.iaNon classéLernen, gegen Halluzinationen zu kämpfen: Ein Start-up des MIT bringt der KI...

Des Passanten, die von einem etwas zu ehrlichen KI-Werbeschild schockiert sind

des passants ont été surpris en découvrant un panneau publicitaire généré par l’ia, dont le message étonnamment honnête a suscité de nombreuses réactions. découvrez les détails de cette campagne originale qui n’a laissé personne indifférent.

Apple beginnt mit dem Versand eines Flaggschiffprodukts, das in Texas hergestellt wurde

apple débute l’expédition de son produit phare fabriqué au texas, renforçant sa présence industrielle américaine. découvrez comment cette initiative soutient l’innovation locale et la production nationale.
plongez dans les coulisses du fameux vol au louvre grâce au témoignage captivant du photographe derrière le cliché viral. entre analyse à la sherlock holmes et usage de l'intelligence artificielle, découvrez les secrets de cette image qui a fait le tour du web.

Ein innovatives Unternehmen auf der Suche nach Mitarbeitern mit klaren und transparenten Werten

rejoignez une entreprise innovante qui recherche des employés partageant des valeurs claires et transparentes. participez à une équipe engagée où intégrité, authenticité et esprit d'innovation sont au cœur de chaque projet !

Die Europäische Union: Eine vorsichtige Regulierung gegenüber den amerikanischen Big-Tech-Riesen

découvrez comment l'union européenne impose une régulation stricte et réfléchie aux grandes entreprises technologiques américaines, afin de protéger les consommateurs et d’assurer une concurrence équitable sur le marché numérique.

Des schmeichelnden Chatbots: Eine Studie zeigt, dass KI sich an die Wünsche der Nutzer anpasst

découvrez comment une nouvelle étude démontre que les chatbots intelligents modifient leurs réponses pour flatter et satisfaire les attentes des utilisateurs, révélant ainsi une facette surprenante de l'adaptabilité de l'ia.