الباحثون يقيمون أداء ChatGPT في تلخيص الملخصات الطبية

في دراسة حديثة نشرت في The Annals of Family Medicine، قام الباحثون بتقييم فعالية محول الدردشة التوليدي المدرب مسبقًا (ChatGPT) في تلخيص الملخصات الطبية لمساعدة الأطباء. هدفت الدراسة إلى تحديد الجودة والدقة والتحيز في الملخصات التي تم إنشاؤها بواسطة ChatGPT، وتوفير نظرة ثاقبة حول إمكاناتها كأداة لاستيعاب كميات هائلة من الأدبيات الطبية وسط قيود الوقت التي يواجهها متخصصو الرعاية الصحية.

تقييمات عالية للجودة والدقة

استخدمت الدراسة ChatGPT لتكثيف 140 ملخصًا طبيًا من 14 مجلة متنوعة، مما أدى إلى تقليل المحتوى بمعدل 70%. وعلى الرغم من بعض الأخطاء والهلوسة التي تم اكتشافها في جزء صغير من الملخصات، فقد قيَّم الأطباء الملخصات بدرجة عالية من حيث الجودة والدقة. تشير النتائج إلى أن ChatGPT لديه القدرة على مساعدة الأطباء في مراجعة الأدبيات الطبية بكفاءة، وتقديم ملخصات موجزة ودقيقة وسط الحجم الهائل من المعلومات.

اختار الباحثون 10 مقالات من كل مجلة من 14 مجلة تغطي موضوعات وهياكل طبية مختلفة. لقد كلفوا ChatGPT بتلخيص هذه المقالات وتقييم الملخصات التي تم إنشاؤها من حيث الجودة والدقة والتحيز والملاءمة عبر عشرة مجالات طبية. وجدت الدراسة أن ChatGPT نجح في تكثيف الملخصات الطبية بمعدل 70%، وحصل على تقييمات عالية من المراجعين الأطباء من حيث الجودة والدقة.

الآثار المترتبة على الرعاية الصحية

وعلى الرغم من التقييمات العالية، فقد حددت الدراسة أخطاء خطيرة وهلوسة في عدد صغير من الملخصات. وتراوحت هذه الأخطاء من البيانات الهامة المحذوفة إلى التفسيرات الخاطئة لتصميمات الدراسة، والتي يمكن أن تغير تفسير نتائج البحوث. ومع ذلك، تم اعتبار أداء ChatGPT في تلخيص الملخصات الطبية موثوقًا به، مع ملاحظة الحد الأدنى من التحيز.

في حين أظهر ChatGPT توافقًا قويًا مع التقييمات البشرية على مستوى المجلة، إلا أن أدائه في تحديد مدى صلة المقالات الفردية بتخصصات طبية محددة كان أقل إثارة للإعجاب. سلط هذا التناقض الضوء على القيود المفروضة على قدرة ChatGPT على التحديد الدقيق لأهمية المقالات الفردية ضمن السياق الأوسع للتخصصات الطبية.

توفر الدراسة رؤى قيمة حول إمكانات الذكاء الاصطناعي، وخاصة ChatGPT، في مساعدة الأطباء في مراجعة الأدبيات الطبية بكفاءة. في حين يُظهر ChatGPT نتائج واعدة في تلخيص الملخصات الطبية بجودة ودقة عالية، إلا أن هناك حاجة إلى مزيد من البحث لمعالجة القيود وتعزيز أدائه في سياقات طبية محددة.

يمكن أن تركز الأبحاث المستقبلية على تحسين قدرة ChatGPT على التعرف على أهمية المقالات الفردية لتخصصات طبية محددة. بالإضافة إلى ذلك، فإن الجهود المبذولة للتخفيف من عدم الدقة والهلوسة في الملخصات التي تم إنشاؤها يمكن أن تزيد من تعزيز فائدة أدوات الذكاء الاصطناعي في إعدادات الرعاية الصحية.

المصدر: https://www.cryptopolitan.com/chatgpt-in-summarizing-medical-abstracts/