الاستخراج المتدرج مقابل نموذج كبير واحد

سلّم فريقًا اليوم مسألة معالجة لغة طبيعية صعبة، وسيكون ردّ الفعل هو الوصول إلى أكبر نموذج متاح وترك كل شيء له. على النص السريري الفرنسي، ردّ الفعل هذا مكلف وبطيء وصعب التدقيق — وفي النهاية ليس حتى الأدقّ. يراهن DEMNE على العكس: إرسال كل نوع كيان إلى أخفّ أداة قادرة على التعامل معه، والتصعيد فقط حين يتطلّب النص ذلك فعلًا.

سُلّم، لا مطرقة

يتكوّن المسار من ثلاث طبقات. القواعد الحتمية — التعبيرات النمطية والمعاجم المنتقاة — تتولّى الكيانات المكتوبة بعدد قليل من الصيغ الثابتة: التواريخ والجرعات والاختصارات المعيارية للمؤشرات الحيوية. ومحوّل (transformer) مضبوط على نص أورام فرنسي يعالج الكيانات التي تتطلّب فهمًا دلاليًا وميدانيًا حقيقيًا. ويقع النموذج اللغوي الكبير في القمة، محجوزًا للحالات الغامضة فعلًا التي تنجو من المرحلتين السابقتين. ولا يصعد شيء أعلى مما يلزم.

لماذا لا نكتفي بالنموذج اللغوي الكبير؟

لأن نموذجًا واحدًا كبيرًا يدفع كلفة النموذج اللغوي الكبير على كل كيان، بما فيها ما كان تعبير نمطي ليحسمه فورًا. فهو أبطأ، ويحتاج ميزانية وحدات رسوميات لا تملكها معظم المستشفيات، وكل قرار صندوق أسود يجب تبريره رغم ذلك أمام طبيب أو مدقّق. وفي مهمة التوجيه نفسها كان خط الأساس «دائمًا النموذج اللغوي» الأسوأ، إذ وافق المستوى الخبير بنسبة 0.148 فقط. فالأداة الأثقل ليست تلقائيًا الأوثق.

كلفة التوجيه الخاطئ

لا يُجدي الاستخراج المرحلي إلا إذا كان التوجيه جيدًا، ولذلك يصبّ DEMNE عنايته هناك. خمسة مقاييس مأخوذة من التعليقات التوضيحية تغذّي مخطط قرار حتميًا تُعاير عتباته السبع عشرة ببحث متعدد الأهداف. والهدف غير متماثل عن عمد: إرسال كيان إلى طريقة أضعف من اللازم يُعاقَب ضعف عقوبة إرساله إلى طريقة مكلفة أكثر من اللازم فحسب — لأن استخراجًا فائتًا في تقرير سريري أغلى من ثانية وحدة رسوميات مهدورة.

ماذا تقول الأرقام

على مجموعة المعايرة الأورامية، يوافق التوجيه المستوى المرجعي للخبراء بنسبة 0.954، مقابل 0.729 لـ«دائمًا القواعد» و0.148 لـ«دائمًا النموذج اللغوي». وبتطبيقه دون تعديل على 300 تقرير AP-HP لم تُرَ من قبل، وجّه 99.5% من الإشارات إلى قواعد حتمية بلغت متوسط F1 قدره 0.941 — بينما لم يتجاوز محوّل مضبوط ضمن ميزانية مستشفى واقعية 0.358. فبالنسبة للكيانات المعيارية التي تهيمن على هذه التقارير، كانت الطبقة الأرخص هي الأدقّ أيضًا.

متى يكون النموذج الواحد هو الجواب الصحيح

ليست المرحلية مجانية: فهي تضيف طبقة توجيه ينبغي بناؤها وقياسها وصيانتها، وعلى العتبات أن تُعاد معايرتها لكل مجال جديد. فإذا كان النص متجانسًا، والكيانات كلها بالصعوبة نفسها، أو توافرت الميزانية وتحمّل التدقيق لنموذج واحد كبير، فإن السُّلّم مجرد عبء إضافي. والدعوى هنا ضيّقة — حين تهمّ الكلفة والكمون وقابلية التتبّع في آنٍ واحد، كما في المعالجة السريرية للغة، يتفوّق القرار كيانًا بكيان على اللجوء افتراضيًا إلى أثقل نموذج والأمل.

الشيفرة والطريقة الكاملة على GitHub؛ والمخطوطة قيد الإعداد.