Published April 13, 2023
| Version v1
Publication
Open
Analyzing the Performance of ChatGPT in Cardiology and Vascular Pathologies
Description
Abstract The article aims to analyze the performance of ChatGPT, a large language model developed by OpenAI, in the context of cardiology and vascular pathologies. The study evaluated ChatGPT's accuracy in answering challenging multiple-choice questions (QCM) using a dataset of 190 questions from the Siamois-QCM platform. The goal was to assess ChatGPT's potential as a valuable tool in medical education compared to two well-ranked students of medicine. The results showed that ChatGPT outperformed the students, scoring 175 out of 190 correct answers with a percentage of 92.10\%, while the two students achieved scores of 163 and 159 with percentages of 85.78\% and 82.63\%, respectively.
Translated Descriptions
⚠️
This is an automatic machine translation with an accuracy of 90-95%
Translated Description (Arabic)
الملخص تهدف المقالة إلى تحليل أداء ChatGPT، وهو نموذج لغوي كبير طورته OpenAI، في سياق أمراض القلب والأوعية الدموية. قيمت الدراسة دقة ChatGPT في الإجابة على أسئلة الاختيار من متعدد الصعبة (QCM) باستخدام مجموعة بيانات من 190 سؤالًا من منصة Siamois - QCM. كان الهدف هو تقييم إمكانات ChatGPT كأداة قيمة في التعليم الطبي مقارنة باثنين من طلاب الطب ذوي التصنيف الجيد. أظهرت النتائج أن ChatGPT تفوق على الطلاب، حيث سجل 175 من أصل 190 إجابة صحيحة بنسبة 92.10 ٪، بينما حقق الطالبان درجات 163 و 159 بنسب 85.78 ٪ و 82.63 ٪ على التوالي.Translated Description (French)
Résumé L'article vise à analyser la performance de ChatGPT, un grand modèle de langage développé par OpenAI, dans le contexte de la cardiologie et des pathologies vasculaires. L'étude a évalué la précision de ChatGPT dans la réponse aux questions à choix multiples (QCM) difficiles à l'aide d'un ensemble de données de 190 questions de la plate-forme Siamois-QCM. L'objectif était d'évaluer le potentiel de ChatGPT en tant qu'outil précieux dans l'éducation médicale par rapport à deux étudiants en médecine bien classés. Les résultats ont montré que ChatGPT a surpassé les étudiants, obtenant 175 réponses correctes sur 190 avec un pourcentage de 92,10\%, tandis que les deux étudiants ont obtenu des scores de 163 et 159 avec des pourcentages de 85,78\% et 82,63\%, respectivement.Translated Description (Spanish)
Resumen El artículo tiene como objetivo analizar el rendimiento de ChatGPT, un gran modelo de lenguaje desarrollado por OpenAI, en el contexto de la cardiología y las patologías vasculares. El estudio evaluó la precisión de ChatGPT para responder preguntas desafiantes de opción múltiple (QCM) utilizando un conjunto de datos de 190 preguntas de la plataforma Siamois-QCM. El objetivo era evaluar el potencial de ChatGPT como una herramienta valiosa en la educación médica en comparación con dos estudiantes de medicina bien clasificados. Los resultados mostraron que ChatGPT superó a los estudiantes, obteniendo 175 de 190 respuestas correctas con un porcentaje de 92.10\%, mientras que los dos estudiantes obtuvieron puntajes de 163 y 159 con porcentajes de 85.78\% y 82.63\%, respectivamente.Files
latest.pdf.pdf
Files
(312.2 kB)
| Name | Size | Download all |
|---|---|---|
|
md5:768205e10d3e84367b4ebcd209fc7071
|
312.2 kB | Preview Download |
Additional details
Additional titles
- Translated title (Arabic)
- تحليل أداء ChatGPT في أمراض القلب والأوعية الدموية
- Translated title (French)
- Analyser la performance de ChatGPT en cardiologie et pathologies vasculaires
- Translated title (Spanish)
- Analizando el Rendimiento de ChatGPT en Cardiología y Patologías Vasculares
Identifiers
- Other
- https://openalex.org/W4365457960
- DOI
- 10.21203/rs.3.rs-2782768/v1
References
- https://openalex.org/W4319301446
- https://openalex.org/W4327946446