Chatbots beantworten Krebsfragen besser als führende Onkologen
Eine Untersuchung deutet darauf hin, dass die durch ChatGPT bekannt gewordene neue Generation KI-gestützter Chatbots mit großen Sprachmodellen Patientenfragen zu Krebs besser beantworten könnte als Onkologen.
In diesem Artikel
Krebspatienten brauchen richtige, einfühlsame und verständliche Antworten auf ihre Fragen. Eine in JAMA Oncology veröffentlichte Studie zeigte in diesem Bereich eine bessere Leistung von KI-Chatbots gegenüber Onkologen. Die Chatbot-Antworten erhielten höhere Bewertungen für Gesamtqualität, Empathie und Lesbarkeit.
Die Studie in JAMA Oncology
In einer am 16. Mai 2024 in JAMA Oncology veröffentlichten Studie wurden drei KI-Chatbots getestet: ChatGPT-3.5, ChatGPT-4 und Claude AI. Die Forschenden verglichen ihre Antworten auf 200 Patientenfragen mit Antworten von sechs Onkologen. Zwei getrennte onkologische Expertenteams bewerteten Qualität, Empathie und Lesbarkeit auf einer Skala von 1 (sehr schlecht) bis 5 (sehr gut).
Ergebnisse
Die Gesamtqualität war bei allen Chatbots signifikant höher als bei den Onkologen (P < 0,05). Dieses Maß umfasste medizinische Richtigkeit, Vollständigkeit und Fokussierung.
Auch bei der medizinischen Richtigkeit schnitten Claude AI und ChatGPT-4 signifikant besser ab als die Onkologen (P < 0,05). Hinsichtlich Vollständigkeit und Fokussierung waren die Antworten aller drei Chatbots besser (P < 0,05).
Chatbot-Antworten wurden außerdem hinsichtlich Empathie und Lesbarkeit höher bewertet (P < 0,05). Die folgende Tabelle stellt die Ergebnisse im Einzelnen dar.
Die obige Grafik vergleicht Antworten von Onkologen und drei Chatbots (ChatGPT-3.5, ChatGPT-4 und Claude AI) auf Patientenfragen. Sie zeigt Bewertungen für Gesamtqualität, medizinische Richtigkeit, Vollständigkeit, Fokussierung, Empathie und Lesbarkeit.
Die Chatbots erhielten im Allgemeinen höhere Bewertungen als die Onkologen. Insbesondere Claude AI erreichte in den meisten Kategorien die höchsten Werte. Dies deutet darauf hin, dass KI-Chatbots qualitativ bessere, einfühlsamere und verständlichere Antworten auf Patientenfragen erzeugen können.
Fazit und künftige Forschung
Nach Ansicht der Forschenden könnten Chatbots hochwertige, einfühlsame und gut lesbare Antworten liefern, die mit ärztlichen Antworten aus Onlineforen vergleichbar sind. Weitere Untersuchungen sind jedoch nötig, um den Umfang solcher Interaktionen, ihre Einbindung in Arbeitsabläufe und die Auswirkungen auf Patienten und Ärzte zu bewerten.
Quellen
War dieser Artikel hilfreich?
Ihre Rückmeldung hilft uns, unsere Inhalte zu verbessern.
Leserkommentare
Kommentar verfassen
Ihr Name und Ihr Kommentar werden erst nach Freigabe durch die Administration veröffentlicht. Ihre E-Mail-Adresse wird Besuchern niemals angezeigt.
Schreiben Sie den ersten Kommentar.