Lernen, gegen Halluzinationen zu kämpfen: Ein Start-up des MIT bringt der KI bei, ihre Grenzen zu erkennen

Publié le 23 Juni 2025 à 20h04
modifié le 23 Juni 2025 à 20h05

Der rasante Aufstieg der künstlichen Intelligenz wirft gewaltige Fragen auf. Die *Halluzinationen*, die von diesen Systemen erzeugt werden, vernachlässigen oft die wesentlichen Grenzen ihrer eigenen Analysefähigkeit. Diese *Urteilsfehler* könnten entscheidende Entscheidungen gefährden, insbesondere in Bereichen wie der Gesundheit. Das Start-up Themis AI, das aus dem renommierten MIT hervorgegangen ist, positioniert sich an der Spitze dieser Problematik. Sein Ziel ist es, der KI beizubringen, ihre eigenen *Unsicherheiten* zu erkennen und irreführende Vorhersagen zu vermeiden. Diese intellektuelle Herausforderung, die lange vernachlässigt wurde, erweist sich als grundlegend für den Aufbau verantwortungsvollerer und zuverlässigerer Systeme.

Der Aufstieg von Themis AI

Themis AI, ein innovatives Start-up aus dem MIT, konzentriert sich auf eine grundlegende Herausforderung: den Systemen der künstlichen Intelligenz beizubringen, ihre eigenen Grenzen zu erkennen. Die KI-Modelle, die häufig eine Überconfidence aufweisen, können fatale Fehler erzeugen, insbesondere in kritischen Kontexten wie der Gesundheit.

Ein dringender Bedarf an Regulierung

Der Aufstieg der von KI erzeugten Halluzinationen bringt wachsende Risiken mit sich. Je mehr diese Technologien in entscheidende Entscheidungen, wie die Entwicklung von Behandlungen für Krebs, integriert werden, desto wichtiger wird ein Alarmmechanismus. Capsa, die Plattform von Themis, führt einen Überprüfungsmechanismus ein, der es der KI ermöglicht, Unsicherheitsmomente anzuzeigen. Dieser Prozess hilft den KI-Modellen, ihren eigenen Grad an Zuversicht zu hinterfragen.

Eine innovative Technologie

Seit ihrer Gründung im Jahr 2021 durch Professorin Daniela Rus hat Themis AI ein Werkzeug entwickelt, das in zahlreiche KI-Systeme integriert werden kann. Dieses System kann Anzeichen von Verwirrung, Voreingenommenheit oder unvollständiger Datenverarbeitung erkennen, die oft die Ursache für Halluzinationen sind. Sektoren wie Telekommunikation und die Ölindustrie haben bereits von dieser Technologie profitiert.

Praktische Anwendungen

Themis AI hat es geschafft, kostspielige Fehler bei der Planung von Netzen für Telekommunikationsanbieter zu vermeiden und Unternehmen im Ölsektor zu helfen, komplexe seismische Daten zu analysieren. Diese Erfolge demonstrieren die Bedeutung von Innovationen im Management der mit KI verbundenen Risiken.

Ein präventiver Ansatz für KI

Die Forschung, die am MIT begonnen wurde, hat eine wesentliche Frage beantwortet: Wie kann man einer Maschine die Fähigkeit verleihen, ihre eigenen Fehler zu erkennen? Der Fokus lag auf der Erkennung von Rassen- und Geschlechtervorurteilen in Gesichtserkennungssystemen. Durch die Neuausbalancierung der Trainingsdaten hat Themis nicht nur Probleme identifiziert, sondern auch Lösungen angeboten.

Optimierung der Gesundheitsversorgung und der pharmazeutischen Forschung

Die potenziell revolutionären Anwendungen dieses Ansatzes zeigen sich im Bereich der Medikamentenentdeckung. Die KI-Systeme sind nun in der Lage, Behandlungen zu bewerten und dabei anzugeben, wann ihre Vorhersagen auf robusten Beweisen oder lediglich auf Hypothesen basieren. Die Pharmaindustrie profitiert bereits von dieser Bewertungsfähigkeit und optimiert damit Zeit und Ressourcen.

Verbesserung von Geräten mit begrenzter Kapazität

Geräte mit begrenzten Ressourcen können ebenfalls von den Fortschritten von Themis profitieren. Dank angepasster Technologien sind diese Geräte in der Lage, Aufgaben lokal effizienter auszuführen und benötigen die Unterstützung leistungsstarker Server nur bei Bedarf.

Die ethischen Implikationen der KI

Die wachsende Präsenz von KI in kritischen Sektoren erfordert eine tiefgehende ethische Reflexion. Die Fähigkeit, Unsicherheit zu erkennen, könnte ein entscheidender Vorteil sein. Andere Unternehmen wie IBM und Roche beschäftigen sich ebenfalls mit KI zur Diabetesbehandlung, was den Weg zu einer personalisierteren Medizin ebnet.

Zukunftsperspektiven

Während Themis AI weiterhin in seiner Mission voranschreitet, wird die Schnittstelle zwischen KI und Ethik zunehmend relevant. Der Fokus auf das Erkennen von Grenzen wird es ermöglichen, Standards für Exzellenz in der KI in verschiedenen Bereichen zu etablieren.

Häufig gestellte Fragen

Was sind die Halluzinationen von KI und warum sind sie besorgniserregend?
Die Halluzinationen von KI beziehen sich auf Fälle, in denen Systeme der künstlichen Intelligenz falsche Informationen erzeugen oder auf Vermutungen basieren, anstatt auf zuverlässigen Daten. Dies wird besorgniserregend, wenn diese Systeme entscheidende Entscheidungen treffen, wie im Rahmen medizinischer Behandlungen oder der Verkehrssicherheit.

Wie trägt Themis AI dazu bei, die Halluzinationen von KI zu reduzieren?
Themis AI nutzt seine Plattform Capsa, um den KI-Systemen beizubringen, ihre eigenen Unsicherheiten zu erkennen und anzugeben, wann sie sich bei einer Antwort unsicher sind, wodurch kostspielige und potenziell gefährliche Fehler vermieden werden.

Welche Arten von KI-Systemen können von der Technologie von Themis profitieren?
Die Plattform Capsa ist so konzipiert, dass sie sich mit praktisch jedem KI-System integrieren lässt, einschließlich solchen, die in der Telekommunikation, der Öl- und Gasexploration sowie Chatbots verwendet werden, um deren Genauigkeit und Zuverlässigkeit zu verbessern.

Warum ist es wichtig, dass KI ihre Grenzen erkennt?
Es ist entscheidend, dass KI ihre Grenzen erkennt, da dies hilft, Entscheidungen zu vermeiden, die auf falschen Annahmen basieren, insbesondere in Bereichen, in denen schwerwiegende Konsequenzen auftreten können, wie in der Medizin oder beim autonomen Fahren.

Welchen Einfluss hatten die Arbeiten von Themis AI auf die Pharmaindustrie?
Themis AI hat gezeigt, wie ihr Ansatz die Medikamentenentdeckung transformieren kann, indem sie den KI-Systemen ermöglicht, solide Vorhersagen von einfachen Vermutungen zu unterscheiden, wodurch Zeit und Kosten bei der Suche nach neuen Medikamenten reduziert werden.

Wie wurde Themis AI gegründet und wie ist ihr Weg verlaufen?
Themis AI wurde 2021 von der MIT-Professorin Daniela Rus und ihren Kollegen gegründet. Ihr Weg begann mit Forschungen, die darauf abzielten, KI-Systeme zuverlässiger zu machen, und entwickelte sich weiter, um Probleme von Vorurteilen und Unsicherheiten in verschiedenen Sektoren anzugehen.

Ist die Technologie von Themis für Geräte mit geringer Leistung geeignet?
Ja, die Technologie von Themis AI ist darauf optimiert, mit Geräten zu arbeiten, die über begrenzte Rechenleistung verfügen, sodass sie Aufgaben effizient lokal ausführen können, während sie bei Bedarf Unterstützung von Servern anfordern.

Wie beeinflusst die Forschung von Themis AI zu Vorurteilen die Wahrnehmung von KI?
Durch die Entwicklung einer Technologie, die Vorurteile in KI-Systemen begrenzt, trägt Themis AI zu einer positiveren und vertrauenswürdigeren Wahrnehmung von KI bei, was für ihre Integration in kritische Bereiche entscheidend ist.

Was sind die Risiken einer KI, die ihre Grenzen nicht erkennt?
Die Risiken umfassen riskante Entscheidungen, die auf falschen Informationen beruhen, was zu schweren Konsequenzen führen kann, wie medizinischen Fehlern, Verkehrsunfällen oder finanziellen Verlusten für Unternehmen.

Was sind die jüngsten Fortschritte in der Technologie von Themis AI?
Themis AI veröffentlicht weiterhin Forschungsergebnisse zur Verbesserung der Genauigkeit von Chatbots und zur Anwendung ihrer Technologien in verschiedenen Sektoren und unterstreicht ihr Engagement, KI zuverlässiger und verantwortungsbewusster zu gestalten.

actu.iaNon classéLernen, gegen Halluzinationen zu kämpfen: Ein Start-up des MIT bringt der KI...

Das Imperium von OpenAI: entdecken Sie unseren faszinierenden Podcast

plongez dans le monde captivant d'openai avec notre podcast exclusif ! explorez les innovations, les défis et les histoires inspirantes qui façonnent l'avenir de l'intelligence artificielle. ne manquez pas notre série d'épisodes enrichissants.

Die 5 wesentlichen Methoden, um das Beste aus den Antworten von ChatGPT herauszuholen

découvrez les 5 méthodes essentielles pour optimiser vos interactions avec chatgpt et obtenir des réponses précises et pertinentes. améliorez vos compétences en conversation ai et exploitez pleinement le potentiel de cet outil puissant.

ChatGPT übertrifft Wikipedia: eine neue Ära für den Zugang zu Informationen

découvrez comment chatgpt redéfinit l'accès à l'information en surpassant wikipédia. une analyse approfondie des fonctionnalités innovantes de cette intelligence artificielle et de son impact sur la recherche et l'apprentissage.
découvrez l'histoire touchante d'un kangourou coincé à l'aéroport, qui éveille des émotions chez les internautes. explorez les réactions variées face à ce petit marsupial dont le charme suscite le débat.
découvrez comment les actions d'nvidia bondissent après l'annonce de résultats financiers au-delà des prévisions, en dépit des défis engendrés par les restrictions d'exportation de puces vers la chine. analyse des facteurs d'une performance inattendue sur le marché.

das IA-Modell von Odyssey verwandelt Videos in interaktive Welten

découvrez comment le modèle d'ia d'odyssey transforme vos vidéos en mondes interactifs fascinants. plongez dans une expérience immersive où chaque image prend vie et où les spectateurs deviennent acteurs de l'aventure.