لا تزال دراسات التنبؤ السريري نادرًا ما تشارك كودًا قابلًا للاستخدام

تحتاج نماذج التنبؤ السريري إلى أكثر من نتيجة منشورة

تُستخدم نماذج التنبؤ السريري بشكل متزايد لدعم القرارات التشخيصية والتنبؤية. وقد تؤثر دقتها المعلنة في كيفية تقدير الأطباء للمخاطر، وترتيب الفحوصات حسب الأولوية، أو مناقشة النتائج المحتملة مع المرضى. لكن تحليلًا جديدًا في Nature Medicine يرى أن شرطًا أساسيًا لتقييم هذه النماذج لا يزال نادرًا: إتاحة الكود التحليلي الذي يقف وراءها.

راجعت الدراسة مقالات بحثية مفتوحة الوصول استشهدت بإطاري الإبلاغ TRIPOD أو TRIPOD+AI، وهما إطاران يتعلقان بالإبلاغ الشفاف عن دراسات نماذج التنبؤ. واستخدم الباحثون مسار عمل مدعومًا بنموذج لغوي كبير لفحص الأدبيات، وتحديد روابط المستودعات، وتقييم المستودعات التي تمكنوا من استردادها باستخدام 14 سمة محددة مسبقًا مرتبطة بقابلية إعادة الإنتاج.

من بين 3,967 مقالًا جرى فحصها، تضمنت 482 مقالة بيانًا يفيد بمشاركة الكود. ويمثل ذلك 12.2% من العينة. ولا يثبت هذا الاكتشاف أن كل دراسة متبقية افتقرت إلى كود يمكن الوصول إليه، لكنه يوضح أن البيانات الصريحة عن مشاركة الكود ظلت استثناءً في الأدبيات التي جرت مراجعتها.

الإتاحة لا تعني قابلية إعادة الإنتاج

تتمثل النقطة المركزية للباحثين في أن رابط المستودع وحده لا يجعل التحليل سهل الفحص أو إعادة الاستخدام. فقد وجدوا تفاوتًا كبيرًا في السمات المرتبطة بقابلية إعادة الإنتاج في المستودعات التي قيّموها. وعمليًا، قد يحتاج باحث آخر إلى أكثر من الملفات المصدرية لفهم إمكانية إعادة بناء نموذج ما: فالتوثيق، ومعلومات تبعيات البرمجيات، وبنية المشروع القابلة للتنفيذ، كلها قد تكون مهمة.

ويكتسب هذا التمييز أهمية خاصة في أعمال التنبؤ السريري. فقد يُطوَّر نموذج اعتمادًا على مجموعة محددة، ومسار عمل للمعالجة المسبقة، ومجموعة من تعريفات النتائج. وإذا تعذر فحص الخطوات التحليلية بصورة مستقلة، يصبح من الأصعب على الباحثين من خارج الدراسة تقييم كيفية تأثير الخيارات المتخذة في مسار العمل على الأداء المعلن، أو ما إذا كان يمكن تكييف العمل واختباره في بيئة مختلفة.

كما وجدت المراجعة أن انتشار مشاركة الكود اختلف على نطاق واسع بحسب المجلة والبلد. ولا يحدد نص الدراسة المقدم أي المجلات أو البلدان كانت في الصدارة أو متأخرة، لكن هذا التفاوت يشير إلى أن الأعراف والتوقعات التحريرية تؤثر في مدى إتاحة الباحثين لأعمالهم.

مراجعة للممارسات البحثية بمساعدة الذكاء الاصطناعي

استخدم المؤلفون عملية مدعومة بنموذج لغوي كبير في دور منهجي: لفحص المقالات ذات الصلة، واستخراج روابط المستودعات، والمساعدة في تقييم المستودعات وفق مجموعة سمات محددة مسبقًا. وأتاح هذا النهج للفريق فحص آلاف الأوراق، بينما ظل القياس الموضوعي مركزًا على خصائص ملموسة للإبلاغ والمستودعات.

ويعكس استخدام هذا النهج أيضًا تحديًا أوسع في حوكمة البحث. فمع ازدياد حجم المنشورات، يصبح من الصعب توسيع نطاق عمليات التدقيق اليدوية لممارسات الشفافية. ويمكن لمسارات العمل الآلية والمنظمة والمصممة بعناية أن تساعد في رسم خريطة لهذه الممارسات، شريطة تقييم مخرجاتها وفق معايير محددة بوضوح. وفي هذه الحالة، ارتبطت المعايير بإتاحة الكود والسمات ذات الصلة بقابلية إعادة الإنتاج، لا بحكم آلي على الجودة العلمية لنموذج بعينه.

لماذا تهم الفجوة عند التطبيق

تهدف النماذج السريرية إلى إرشاد قرارات واقعية، لذلك تحتاج موثوقيتها وقابليتها للتعميم إلى تدقيق دقيق. وقد يختلف أداء نموذج يبدو فعالًا في ورقة منشورة عند تطبيقه في مكان آخر، حيث تختلف مجموعات المرضى، وجمع البيانات، ومسارات العمل السريرية. ويُعد التقييم المستقل للعملية التحليلية إحدى طرق فحص أسس هذه الادعاءات.

لا يستطيع الكود المفتوح حل جميع مشكلات قابلية إعادة الإنتاج. فقد تكون بيانات المرضى مقيدة لأسباب تتعلق بالخصوصية والقانون، وقد لا يتمكن المستخدمون الخارجيون من إعادة إنشاء تحليل ما بشكل مطابق تمامًا من دون الوصول إلى البيانات الأصلية. ومع ذلك، يمكن للكود التحليلي الواضح، وتفاصيل التبعيات، والتوثيق القابل للاستخدام أن تجعل العمل أكثر قابلية للفحص، وأن تساعد الباحثين على فهم ما يلزم لاختباره بمسؤولية باستخدام مجموعة بيانات أخرى.

ويعرض المؤلفون النتائج بوصفها دليلًا على الحاجة إلى توقعات أوضح تتجاوز مجرد الإعلان عن وجود الكود. ويقولون إن التوثيق، وتحديد التبعيات، والبنية القابلة للتنفيذ ينبغي أن تكون جزءًا من ممارسة أقوى. ويمكن لهذه العناصر تقليل الغموض أمام القراء والفرق التي تحاول إعادة إنتاج دراسة أو توسيعها.

TRIPOD-Code هو الهدف السياسي التالي

أُجريت المراجعة لتقديم معلومات إلى TRIPOD-Code، وهو دليل إبلاغ يركز على إتاحة الكود وقابلية إعادة الإنتاج. ولا تضمن أدلة الإبلاغ بحد ذاتها أن ينشر الباحثون مشاريع كاملة وقابلة للاستخدام. لكنها قد تجعل التوقعات واضحة للمؤلفين والمراجعين والمجلات، وأن تنشئ مفردات مشتركة لتحديد ما تم توفيره.

وتقدم النتيجة معيارًا ملموسًا: في عينة الأدبيات هذه، تضمنت نحو ورقة واحدة فقط من كل ثماني أوراق بيانًا عن مشاركة الكود. وفي مجال تتجه فيه النماذج نحو الاستخدام السريري، يرى المؤلفون أن تحسين جودة ووضوح العمل التحليلي المشترك قد يجعل البحث أكثر قابلية للاستخدام، ويساعد في دعم نقل أكثر أمانًا إلى الممارسة.

لذلك تنقل الدراسة الاهتمام من مجرد ذكر الورقة للكود إلى إمكانية فهم قارئ مستقل لمسار العمل التحليلي وتشغيله. وهذا معيار أعلى، لكنه يتماشى ارتباطًا وثيقًا مع الأدلة اللازمة للحكم على نماذج التنبؤ السريري قبل الاعتماد عليها في أماكن الرعاية.

يستند هذا المقال إلى تقرير نشرته Nature Medicine. اقرأ المقال الأصلي.