لماذا تتعثّر أغلب المساعدات المؤسسية
في المشاريع المتعثّرة التي نراجعها، نادراً ما يكون الخلل في اختيار النموذج اللغوي. الخلل يكون في تعريف المشكلة: الفريق يبدأ من سؤال «أي نموذج نستخدم؟» بينما السؤال الحقيقي هو «أين توجد الإجابة اليوم، ومن يملكها، وهل النسخة التي سنعتمد عليها سارية؟». النموذج لا يعرف شيئاً عن سياسة الإجازات لديكم ولا عن بنود عقودكم مع مورّديكم، وأي مساعد يعتمد على معرفته الداخلية سينتج نصاً محكم الصياغة غير صحيح في جوهره — وهذا أسوأ من ألا يجيب.
العثرة الثانية أن العرض التجريبي يبدو ممتازاً دائماً. تُختار حفنة مستندات نظيفة، وتُطرح أسئلة يعرف الفريق إجاباتها، فيخرج الجميع من الاجتماع مقتنعاً. ثم يُفتح النظام لموظفين حقيقيين يسألون بصياغات لم تخطر لأحد، عن مستندات غير مرتّبة، بعضها متقادم وبعضها موجود بنسختين متعارضتين. الفجوة بين العرض والتشغيل في هذا النوع من الأنظمة أوسع منها في أي برمجيات أخرى، لأن مصدر الخطأ ليس الشيفرة بل المحتوى.
المصطلح نفسه — الاسترجاع المعزّز بالتوليد — جاء من ورقة بحثية نُشرت عام 2020، وفكرته بسيطة: بدل أن يجيب النموذج من ذاكرته، نبحث أولاً عن النصوص ذات الصلة في مصادرك، ثم نطلب منه صياغة إجابة من هذه النصوص وحدها. البساطة في الفكرة لا تعني بساطة في التنفيذ، لأن كل التعقيد ينتقل إلى ما قبل التوليد: كيف تجد النص الصحيح.
إطار قرار: هل مشكلتك فعلاً مشكلة استرجاع؟
قبل تخصيص ميزانية، مرّر الحالة على أربعة أسئلة. ابدأ بأصعبها: هل الإجابة مكتوبة فعلاً في مكان ما؟ إن كانت المعرفة في رؤوس ثلاثة أشخاص فقط، فما تحتاجه مشروع توثيق لا مشروع ذكاء اصطناعي — والمساعد سيكشف الفراغ لا أكثر. الثاني: هل يتغيّر المحتوى؟ إن كان يتغيّر مع كل تحديث سياسة أو عقد، فالاسترجاع هو الأسلوب المناسب؛ أما الضبط الدقيق للنموذج فيفيد في تثبيت أسلوب أو صيغة إخراج، لا في حمل معرفة متحركة تحتاج تحديثاً أسبوعياً.
الثالث: هل يحتاج المستخدم إلى التحقق؟ إذا كان سيبني على الإجابة قراراً مهنياً أو التزاماً تعاقدياً أو رداً لعميل، فالاستشهاد بالمصدر شرط أساسي لا ميزة إضافية، والنظام الذي يعطي إجابة بلا فقرة يمكن فتحها لا يصلح لهذا الاستخدام. الرابع: هل المطلوب معرفة أم إجراء؟ «ما سقف بدل السفر؟» سؤال استرجاع. «قدّم لي طلب سفر» ليس استرجاعاً، بل تكامل مع نظام قائم عبر واجهات برمجية وصلاحيات تنفيذ — وخلط الاثنين في نطاق واحد سبب متكرر لتأخّر المشاريع.
وهناك إجابة مشروعة رابعة نقولها للعملاء أحياناً: لا تبنِ شيئاً الآن. إذا كانت مكتبة السياسات لديكم غير مصنّفة ولا يُعرف مالك كل مستند، فتنظيف ذلك ورفع جودة البحث القائم قد يعطي نتيجة أسرع وأرخص، ويجعل مشروع المساعد لاحقاً أقصر بكثير.
ابدأ بجرد المصادر، لا بقاعدة المتجهات
أول مخرج في أي مشروع من هذا النوع ليس نموذجاً أولياً، بل جدول. لكل مصدر: اسمه، مالكه بالاسم، صيغته، تاريخ آخر تحديث، هل هو النسخة السارية أم مسودة، ومن يحق له الاطلاع عليه. هذا الجدول ممل، لكنه يكشف خلال أيام ما يظهر عادةً بعد شهور: أن السياسة نفسها موجودة بثلاث نسخ في ثلاثة أماكن، وأن لا أحد يعرف أيها المعتمدة.
من الجرد تخرج قرارات لا يستطيع أي إعداد تقني تعويضها. ما الذي يُستبعد من الفهرسة نهائياً — المسودات، الأرشيف القديم، مجلدات المشاريع المنتهية؟ أي المصادر تُرجَّح عند التعارض؟ وما المستندات التي تحتاج معالجة قبل الفهرسة أصلاً، مثل ملفات PDF الممسوحة ضوئياً التي لا تحوي نصاً بل صوراً، والتي تحتاج تعرّفاً ضوئياً على الحروف كبند تكلفة مستقل.
رأينا المبني على التنفيذ: أعلى مردود في هذه المشاريع يتحقق قبل كتابة سطر واحد من شيفرة الاسترجاع. إخراج نسخة متقادمة من الفهرس يحسّن جودة الإجابات أكثر من أي تبديل للنموذج أو ضبط لمعاملات البحث. وإذا رفض العميل الاستثمار في هذه المرحلة، فالمشروع يبدأ بدَيْن يظهر لاحقاً على هيئة إجابات خاطئة يصعب تفسير سببها.
من السؤال إلى الإجابة: أين تُكسب الجودة فعلاً
المسار التقني له ست محطات، وكل واحدة منها تستطيع أن تُفسد النتيجة وحدها. الاستيعاب والتحليل: استخراج النص والبنية من المستندات. الجدول الذي يُحوَّل إلى نص مسطّح يفقد معناه تماماً، وسلّم الصلاحيات المالية المكوّن من أعمدة يصبح سطراً بلا دلالة. التقسيم: تقطيع المستند إلى مقاطع قابلة للاسترجاع. القاعدة العملية أن يتبع التقسيم بنية المستند — مادة، بند، عنوان فرعي — لا عدداً ثابتاً من الحروف، وأن يحمل كل مقطع ترويسة تذكر اسم المستند والقسم والتاريخ حتى يبقى مفهوماً خارج سياقه.
الاسترجاع: هنا يقع القرار الأهم. البحث الدلالي وحده يخطئ في الأرقام والرموز وأسماء البنود ومعرّفات المنتجات، والبحث بالكلمات المفتاحية وحده يفشل حين يسأل الموظف بصياغة مختلفة عن صياغة المستند. الجمع بينهما ليس ترفاً هندسياً، بل هو ما يفرّق بين نظام يُستخدم ونظام يُهجَر بعد أسبوعين. ثم إعادة الترتيب: ترشيح المقاطع المسترجَعة وإدخال أقلّها عدداً وأدقّها صلة إلى النموذج، لأن إغراق النموذج بنصوص هامشية يخفّض دقة الإجابة لا يرفعها.
التوليد المقيّد والاستشهاد: التعليمة الموجّهة للنموذج تحدّد صراحةً أن يجيب من المقاطع المعطاة فقط، وأن يقول إن الإجابة غير موجودة حين تكون كذلك. والاستشهاد يجب أن يفتح الفقرة نفسها لا الملف من أوله — لأن رابطاً إلى مستند من أربعين صفحة يعني عملياً أن أحداً لن يتحقق. مجمل خبرتنا أن أغلب مكاسب الجودة تأتي من التحليل والتقسيم والاسترجاع، لا من الانتقال إلى نموذج أكبر.
العربية والإنجليزية في فهرس واحد: قيد تصميم لا مسألة ترجمة
في السوق السعودي، الوضع الطبيعي أن يسأل الموظف بالعربية عن مستند مكتوب بالإنجليزية، أو العكس، وأن يخلط في السؤال الواحد بين مصطلح عربي ومصطلح لاتيني. هذا ليس استثناءً يُعالج لاحقاً، بل قيد يجب أن يدخل في التصميم من البداية، وإلا انتهيت بفهرسين منفصلين ونظام يجيب نصف الأسئلة.
التفاصيل التي تُهمَل عادةً: التنويعات الصرفية العربية والتشكيل واختلاف كتابة الهمزات تجعل البحث بالكلمات المفتاحية وحده غير موثوق؛ والمصطلحات المنقولة تُكتب بصيغتين («فاتورة» و«إنفويس»)؛ وأسماء الأنظمة والمنتجات تظهر بحروف لاتينية داخل جملة عربية. وأخطرها عملياً: ملفات PDF العربية التي تُستخرج منها الحروف مفكّكة أو معكوسة الترتيب. افحص عيّنة من مستنداتك الفعلية مبكراً في المشروع — لا في مرحلة الاختبار — لأن اكتشاف هذه المشكلة متأخراً يعيد تصميم خط الاستيعاب كله.
ما نطبّقه عملياً: استرجاع هجين على فهرس واحد يضمّ اللغتين، مع توسيع الاستعلام لتوليد صياغات بديلة بالعربية والإنجليزية قبل البحث، ومسرد للمصطلحات المعتمدة لدى المؤسسة يربط المرادفات ببعضها. أما الإجابة فتُصاغ بلغة السؤال، بينما يبقى الاقتباس المستشهد به بلغة المستند الأصلية دون ترجمة — لأن ترجمة بند تعاقدي داخل الإجابة تحوّل الاستشهاد من دليل إلى مصدر لبس.
الصلاحيات ومسار البيانات
الخطر الأوضح في هذه الأنظمة ليس إجابة خاطئة، بل مقطع صحيح يصل إلى شخص لا يحق له الاطلاع عليه. الفهرس بطبيعته يجمع محتوى من مستودعات متعددة في مكان واحد، وإذا لم تُطبَّق الصلاحيات وقت الاسترجاع فقد بنيت قناة تسريب مرتّبة. القاعدة التي نعمل بها: تُقرأ الصلاحيات من نظام الهوية القائم لديكم وتُطبَّق على نتائج البحث قبل وصولها إلى النموذج، ولا يُنشأ نموذج صلاحيات موازٍ داخل المساعد، لأن أي نموذج موازٍ يتباعد عن الأصل خلال أشهر ولا أحد يلاحظ.
ثم مسار البيانات نفسه: ما الذي يُرسَل إلى مزوّد النموذج في كل طلب، وأين يُخزَّن الفهرس، وكم تُحفظ سجلات الأسئلة. السجلات تحديداً تُهمَل كثيراً — نص السؤال قد يحتوي اسم عميل أو رقم عقد أو بيانات شخصية، وهو يُخزَّن افتراضياً بلا تفكير. حدّد مدة الاحتفاظ ومن يطّلع عليها قبل الإطلاق لا بعده.
أي معالجة لبيانات شخصية أو بيانات عملاء ضمن هذا النظام تخضع للأنظمة المعمول بها ولسياسات الأمن والخصوصية لدى مؤسستكم، وهذا أمر يراجعه مستشار قانوني مؤهل وفريق الأمن السيبراني لديكم قبل التشغيل — ولا يُعامَل كتفصيل فني يُؤجَّل. من الناحية المنهجية، هناك أطر منشورة يمكن البناء عليها لتنظيم عمل إدارة مخاطر الذكاء الاصطناعي، مثل إطار إدارة مخاطر الذكاء الاصطناعي الصادر عن المعهد الوطني الأمريكي للمعايير والتقنية، ويصلح كهيكل للنقاش الداخلي حتى مع اختلاف السياق التنظيمي.
كيف تثبت أنه يعمل قبل أن تفتحه للناس
الانطباع بعد عرض تجريبي ليس قياساً. ما تحتاجه مجموعة تقييم: أسئلة حقيقية جُمعت من قنوات الدعم الداخلي ورسائل الموظفين وتذاكر الخدمة، لكل سؤال منها المستند والفقرة المتوقعة كإجابة صحيحة. تُبنى هذه المجموعة قبل بدء التطوير لا بعده، وإلا صُمّم النظام ليجتاز اختباراً كُتب على مقاسه.
ضمّن ثلاثة أنواع من الأسئلة. أسئلة مباشرة لها إجابة واحدة في مستند واحد. أسئلة مركّبة تتطلب الجمع بين مستندين — وهي التي تكشف ضعف الاسترجاع. وأسئلة لا إجابة لها في محتواكم إطلاقاً، وهذه أهمها لأنها تختبر سلوك الرفض: النظام الذي يخترع إجابة لسؤال لا مصدر له سيفعل ذلك في الإنتاج أمام موظف يصدّقه.
وثلاثة أسئلة تُطرح على كل نتيجة: هل استُرجع المصدر الصحيح أصلاً؟ هل الإجابة مستندة إلى المقاطع المسترجَعة دون إضافات من عند النموذج؟ وهل صياغتها مفيدة لمن سيقرأها؟ الحكم في هذه المرحلة لخبير المجال من طرفكم، لا للفريق التقني — فالمهندس لا يعرف أن البند الصحيح هو الملحق المعدّل لا الأصل. وشغّل المجموعة كاملة عند كل تغيير: تحديث إصدار النموذج، تعديل التقسيم، إضافة مصدر جديد. هذه هي شبكة الأمان الوحيدة التي تخبرك أن تحسيناً في مكان لم يكسر شيئاً في مكان آخر.
ما بعد الإطلاق: البنود التي تُنسى في الميزانية
المساعد ليس مشروعاً ينتهي بالتسليم، بل خدمة تُشغَّل. المزامنة وإعادة الفهرسة تعملان باستمرار مع كل تحديث مستند. إصدارات النماذج تتغيّر ويتغيّر معها السلوك، وهو سبب كافٍ لإعادة تشغيل مجموعة التقييم دورياً وليس عند الأعطال فقط. وتكلفة التشغيل ترتبط بحجم الاستخدام لا بحجم المشروع، وهو ما يفاجئ الفرق التي قدّرت الميزانية على أساس مرحلة البناء وحدها.
المخرج الأكثر قيمة بعد الإطلاق ليس المساعد نفسه، بل تقرير الفجوات: قائمة الأسئلة التي طُرحت ولم يوجد لها مصدر. هذه القائمة تحوّل التوثيق من مهمة مؤجلة إلى قائمة أولويات مرتّبة حسب ما يسأل عنه الموظفون فعلاً، وهي في تجربتنا أول شيء يقنع الإدارة بجدوى المشروع.
وقبل التعاقد مع أي جهة، اطلب أربعة أشياء صريحة: كيف تُطبَّق الصلاحيات ومن أين تُقرأ؛ كيف يبدو الاستشهاد وهل يفتح الفقرة أم الملف؛ ما مجموعة التقييم ومن يحكم عليها؛ وما الذي يحدث حين لا توجد إجابة. الجهة التي لا تملك رداً محدداً على هذه الأربعة لم تشغّل نظاماً كهذا في بيئة إنتاج حقيقية.
خلاصة عملية
- تحقّق أولاً أن الإجابة مكتوبة فعلاً في مستند له مالك محدد ونسخة سارية — إن لم تكن، فأنت أمام مشروع توثيق لا مشروع ذكاء اصطناعي.
- ابنِ مجموعة أسئلة تقييم حقيقية قبل بدء التطوير، وضمّنها أسئلة لا إجابة لها في محتواكم لاختبار سلوك الرفض.
- اشترط أن يفتح الاستشهاد الفقرة المصدر نفسها لا الملف من أوله، وإلا فلن يتحقق أحد من أي إجابة.
- اقرأ الصلاحيات من نظام الهوية القائم وطبّقها وقت الاسترجاع، ولا تسمح بإنشاء نموذج صلاحيات موازٍ داخل المساعد.
- ابدأ بإدارة واحدة ونوع مستندات واحد حتى تستقر الجودة، ثم وسّع — والتوسّع المبكر يخفي مصدر الخطأ.
الأسئلة الشائعة
هل نحتاج إلى ضبط دقيق (fine-tuning) للنموذج على مستنداتنا؟
في أغلب حالات المعرفة المؤسسية: لا. الضبط الدقيق يفيد في تثبيت أسلوب أو صيغة إخراج أو لغة متخصصة، لكنه وسيلة سيئة لحمل معرفة تتغيّر، لأن كل تحديث سياسة يعني إعادة تدريب. والأهم أن النموذج المضبوط لا يستطيع الإشارة إلى مصدر إجابته، وهذا وحده يستبعده في السياقات التي تحتاج تحققاً.
هل يمكن تشغيل النظام داخل بنيتنا دون إرسال المستندات إلى مزوّد خارجي؟
نعم من حيث المبدأ، وهناك مفاضلة حقيقية يجب أن تُطرح بوضوح: التشغيل الداخلي الكامل يعطي سيطرة أعلى على البيانات مقابل تكلفة بنية تحتية وتشغيل أعلى وخيارات نماذج أضيق. هناك أيضاً خيارات وسطى مثل نشر النموذج داخل بيئتكم السحابية الخاصة. القرار يتبع سياسة البيانات لديكم وحساسية المحتوى، ويُتخذ في مرحلة الجرد لا بعد بدء البناء.
ماذا يحدث إذا أعطى المساعد إجابة خاطئة لموظف؟
تُبنى الحماية على أربع طبقات: تقييد التوليد بالمقاطع المسترجَعة، وإظهار الاستشهاد ليتحقق القارئ، وسلوك رفض صريح عند غياب المصدر، وقناة إبلاغ داخل الواجهة تُسجَّل منها الحالات وتُراجَع دورياً. ولا يُقدَّم النظام للموظفين على أنه مرجع نهائي، بل كطبقة وصول أسرع إلى المستند المعتمد الذي يبقى هو المرجع.
من أين نبدأ إذا كان محتوانا غير مرتّب أصلاً؟
من نطاق واحد ضيّق: إدارة واحدة، أو نوع مستندات واحد يُعرف مالكه ونسخته السارية. تنظيف نطاق محدود وإثبات جودة الإجابة فيه أسرع بكثير من محاولة ترتيب كل المحتوى قبل البدء، ويعطي الإدارة نتيجة ملموسة تبرّر التوسّع. أما البدء بكل المستودعات دفعة واحدة فينتهي عادةً بنظام متوسط الجودة في كل شيء وموثوق في لا شيء.
المصادر
- Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks — arXiv · https://arxiv.org/abs/2005.11401
- AI Risk Management Framework — National Institute of Standards and Technology (NIST) · https://www.nist.gov/itl/ai-risk-management-framework