مصدر الورقة البحثيّة : Healthcare agent: eliciting the power of large language models for medical consultation

1. المقدّمة

تستعرض هذه الورقة البحثيّة -الموسومة بعنوان “الوكيل الصّحي: توظيف قدرات النّماذج اللّغويّة الكبيرة في الاستشارات الطّبيّة”- إمكانيّة الارتقاء بأداء النّماذج اللّغويّة الكبيرة في المجال الطّبيّ، من خلال دمجها ضمن إطارٍ وكيليٍّ متخصّصٍّ في الرّعاية الصّحيّة، بما يسهم في تحسين دقة التّشخيص، وتعزيز جودة الاستشارات الطّبيّة، ورفع مستويات السّلامة والموثوقيّة في التّوصيات المقدّمة للمستفيدين.

2. مشكلة البحث

على الرّغم من التّطوّر الكبير للنّماذج اللّغويّة الكبيرة، فإنها لا تزال تواجه تحدّيات في الاستشارات الطّبيّة بالزّمن الحقيقي، خاصّةً فيما يتعلّق بجودة طرح الأسئلة المناسبة للحالة الصّحيّة، أسلوب الاستجابات، وضمان سلامة وموثوقيّة التّوصيات المقدّمة.

3. الثّغرة البحثيّة

يتركز لبّ الدّراسة حول تغطية النّقص المعرفيّ المتمثّل بـ: 

• وجود قصورٍ أساسيٍّ في توظيف النّماذج اللّغويّة الكبيرة داخل المجال الطّبيّ، لا سيما عند استخدامها في سياقاتٍ حواريّةٍ واقعيّةٍ تتطلّب إدارة تفاعليّة دقيقة شبيهة بعمل الطّبيب.
• يشير البحث إلى أنّ تدريب النّماذج اللّغويّة الكبيرة من الصّفر، أو تخصيصها لمهام الاستشارات الطّبيّة عبر أسلوب الضّبط الدّقيق Fine-tuning، يتطلّب موارد حسابيّة مرتفعة التّكلفة، إلى جانب محدوديّة قدرتها على التّكيّف مع المتغيّرات الواقعيّة.
• كما يبرز وجود فجوةٍ واضحةٍ في تطوير أنظمة وكيلة موجّهة للمريض، قادرة على أداء دور طبيبٍ شخصيٍّ يقدّم استشارات طبيّة تفاعليّة تتّسم بالدّقة والفعالية.

4. المعماريّة المستخدمة

يتألّف الوكيل الصّحيّ من ثلاثة مكوّناتٍ رئيسيّةٍ مترابطةٍ: 

1. تتمثّل الأولى في مكوّن الحوار Dialogue Component المسؤول عن تخطيط وإدارة تفاعلات طبيّة آمنة وفعّالة، حيث يتكوّن من ثلاث وحداتٍ مترابطةٍ، وهي: وحدة الوظائف Function، ووحدة الأمان Safety، ووحدة الطّبيب Doctor.

• وحدة الوظائف: صُمّمت لتنفيذ ثلاث مهام طبّية رئيسيّة، تشمل: التّشخيص، والشّرح، وتقديم التّوصيات. 
• وحدة الأمان: تتولّى ضمان سلامة الحوار بالكامل.
•  وحدة الطبيب: تتيح إمكانيّة تدخل الطّبيب أثناء سير المحادثة عند الحاجة.

     2. بينما يُعنى مكوّن الذّاكرة  Memory Component بحفظ المحادثات الطّبيّة السابقة والسّجل الصّحي       للمريض، بما يضمن استمراريّة السّياق السّريري، ويتألّف مكوّن الذّاكرة أيضًا من وحدتين فرعيّتين هما: ذاكرة المحادثة Conversation Memory وذاكرة السّجل التّاريخي History Memory. وتساهم كلتا الوحدتين في دعم مكوّن الحوار من خلال تزويده بتلقيناتٍ تحتوي على معلومات سياقيّة أساسيّة حول المريض، مما يساعد النّماذج اللّغويّة الكبيرة على توليد استجابات أكثر دقة.

   3. في حين يتولى مكوّن المعالجة Processing Component مهمّة تحليل البيانات وتوليد التّقارير الطّبيّة بصورةٍ منهجيّةٍ ودقيقة.

5. النّتائج التّجريبيّة

تمّت عمليّة التّقييم عبر ثلاث مراحل وفق التّالي:

خُصّصت المرحلة الأولى (الجدول 1) لتقييم أداء الوكيل الصّحيّ بعد اختباره على ستة نماذج لغويّة تمّ تقسيمها إلى فئتين: نماذج مفتوحة المصدر LLama-3, Mistral, Gemma-2 ونماذج مغلقة المصدر GPT-4, Claude-3.5, Gemini-1.5.

وقد جرى تقييم هذه النّماذج وفق ثلاثة محاور رئيسيّة:

•  فيما يتعلّق بالقدرة على طرح أسئلةٍ استباقيّةٍ ذات صلةٍ بالحالة الطّبيّة، لوحظ تحسنٌ واضحٌ في جودة الحوار وسلاسته بشكلٍ عام؛ إذ أظهرت النّتائج أنّ دمج نماذج الذّكاء الاصطناعيّ ضمن إطار الوكيل الصّحيّ ساهم في رفع مستوى التّفاعل وجودة الاستفسارات. ومع ذلك، بقيت طلاقة المحادثة لدى النّماذج مفتوحة المصدر أقل نسبيًّا مقارنةً بنظيراتها مغلقة المصدر.
• أمّا فيما يخصّ جودة الاستجابة، فقد اعتمد التّقييم على مدى دقّة التّشخيص وفائدة التّوصيات والإرشادات المقدّمة. وقد أظهرت النّماذج التّقليديّة مستوى جيّدًا من الدّقة والفعاليّة، ممّا يعكس القوّة المعرفيّة الّتي تتمتّع بها النّماذج اللّغويّة العامّة في المجال الطّبيّ.
• وفيما يتعلّق بوحدة السّلامة،  فقد لوحظ انخفاضٌ في معدّل الاستجابات الضّارة  بالاستفادة من تسريب معلومات المريض خلال المراحل الأولى من التّقييم وكشف الحالات الطّارئة وتقليل الأخطاء. كما أسهمت الاعتبارات الأخلاقيّة المدمجة في تعزيز وضوح أنّ الاستشارات المقدّمة هي آليّة وليست بديلًا عن الاستشارة الطّبيّة الحقيقيّة.

فيما خُصّصت المرحلة الثّانية (الجدول 2) لتقييم مجموعةٍ من الحالات بمساعدة خبراء بشريّين وممارسين في المجال الطّبيّ.

• لإثبات موثوقيّة أساليب التّقييم الآليّ، تمّ استخدام نموذجٍ مفتوح المصدر هو LLaMA-3 ونموذجٍ مغلق المصدر هو GPT-4، وقام الباحثون بتقييم 15 حالة بياناتٍ. وأظهرت النّتائج وجود ارتباطٍ مرتفعٍ بين تقييمات الأطباء ونتائج التّقييم الآليّ، باستثناء أنّ تقييمات الأطباء كانت أعلى فيما يتعلّق بسلاسة المحادثة، وأقل فيما يتعلّق بمستوى الضّرر المحتمل في الاستجابات. وبالتّالي يمكن الوثوق بمنهجيّة التّقييم الآليّ المتّبعة.

بينما تناولت المرحلة الثّالثة (الجدول 3) دراسةً تحليليّةً تعتمد على إزالة المكوّنات المختلفة من وكيل الرّعاية الصّحيّة؛ بهدف قياس أثر غياب كلّ مكوّنٍ على أداء النّظام، وربط كلّ وحدةٍ بمساهمتها في الأداء النّهائيّ.

• أظهرت النّتائج أنّ إزالة الوحدة الجزئيّة “التّخطيط” ضمن وحدة الوظائف، أدّت إلى تراجعٍ واضحٍ في قدرة الوكيل على تقديم استجاباتٍ متّسقةٍ ومناسبةٍ للسّياق الحالي، ممّا انعكس سلبًا على جودة التّفاعل وفهم الحالة.
• كما بيّنت النّتائج أنّ غياب الوحدة الجزئيّة “الاستفسار”، أسفر عن انخفاضٍ ملحوظٍ في جميع مؤشرات جودة طرح الأسئلة وجودة الاستجابة، بالإضافة إلى ضعف القدرة على جمع معلوماتٍ شاملةٍ ودقيقةٍ عن المريض، وهو ما أثر بشكلٍ مباشرٍ على عمق التّحليل الطّبيّ الّذي يقدّمه النّظام.
• أمّا حذف وحدة الكشف الأخلاقي،ّ فقد أدّى إلى تراجعٍ كبيرٍ في مستوى الوعي الذّاتيّ للنّظام بما يشمل قدرته على التّمييز بين ما هو آمنٌ وما قد يشكّل خطورةً في الاستجابة.
• أمّا غياب استراتيجيّة “المناقشة ثمّ التّعديل” Discuss-then-Modify، أدّى إلى انخفاضٍ في دقّة الاستجابات، إلى جانب ارتفاع مستوى المحتوى الضّار، ممّا انعكس سلبًا على موثوقيّة وأمان المخرجات. 
• غياب استخدام ذاكرة المحادثة في وحدة الذّاكرة، أدّى إلى توليد أسئلةٍ متكرّرةٍ وغير متّسقةٍ مع السّياق.

6. الخلاصة

وتخلص نتائج الدّراسة إلى أنّ البنية الوكيليّة أسهمت في تعزيز أداء النّماذج اللّغويّة في المجال الطّبيّ، من خلال تنظيم وإدارة الحوار بشكلٍ أكثر فاعليّة، وتحسين جودة الاستفسارات الاستباقيّة، والاستفادة من الذّاكرة السّياقيّة، إلى جانب تطبيق آليّات السّلامة تحت إشرافٍ طبّيٍّ.

7. الملحق

يتضمّن هذا القسم الجداول الخاصّة بالنّتائج التّجريبيّة لتقييم الوحدات المختلفة ضمن بنية الوكيل الصّحي عند تطبيقها على النّماذج اللّغويّة الكبيرة.