هذه الصفحة موجهة إلى قادة تقنية المعلومات ومقدمي الخدمات ومسؤولي الأعمال الذين يريدون أن يجيب الذكاء الاصطناعي عن الأسئلة من مستنداتهم الخاصة. يمكن أن تصبح أدلة المنتجات والسياسات الداخلية وقواعد معرفة الدعم مادةً مصدرية. لكن ما يحدد القيمة ليس اسم النموذج، بل ما إذا كانت مجموعة الأسئلة حقيقية، والصلاحيات واضحة، والاستشهادات قابلة للتحقق.
تساعد CNPS في تحديد نطاق التقييم وإعداد مجموعة التقييم والاتفاق على القبول، ويمكنها مناقشة التنفيذ مع خيارات مفتوحة المصدر مثل FastGPT عند الحاجة. المشاريع العامة مثل Dify وRAGFlow وQwen وDeepSeek نقاط انطلاق بحثية، وليست مشاريع سلّمتها CNPS لعملائها. ويُتفق على نطاق التنفيذ وتراخيص البرمجيات بشكل منفصل.
أين يناسب هذا الحل
أسئلة وأجوبة أدلة المنتجات والدعم التقني
تحتاج فرق ما بعد البيع أو الدعم إلى إجابات دقيقة من أدلة بإصدارات متعددة مع إظهار المصدر. قيّم كيفية التعامل مع تعارض الإصدارات وما إذا كانت الاستشهادات تدعم الإجابة فعلاً.
الاستعلام عن السياسات والإجراءات الداخلية
يسأل الموظفون عن النفقات أو الموافقات أو خطوات الامتثال. قيّم حدود الصلاحيات: ينبغي أن يسترجع كل دور المستندات المسموح له بها فقط، وأن تُسحب السياسات القديمة فوراً.
الفرز الأولي للاستفسارات متعددة اللغات
تتلقى فرق التصدير استفسارات بالصينية أو الإنجليزية أو العربية وتحتاج إلى إجابة أولى من مواد المنتج قبل المراجعة البشرية. قيّم الأداء باللغة المستهدفة وسلوك الامتناع عن الإجابة.
المخرجات المتوقعة
تقييم محدد النطاق لمساعد معرفي
المعلومات المطلوبة
مستندات نموذجية مصرح باستخدامها، واللغات المستهدفة، وعدد المستخدمين المتوقع، ومتطلبات الاستضافة، ومسؤول العمل.
ما يجب تقييمه
- أنشئ مجموعة تقييم مع إجابات مرجعية.
- تحقق من الاستشهادات وإصدار النموذج وسلوك الامتناع عن الإجابة.
- اختبر صلاحيات المستندات وإجراءات التحديث.
- قارن التكلفة التشغيلية الكاملة ووقت المراجعة البشرية.
كيف يُجرى التقييم خطوة بخطوة
- ثبّت مهمة واحدة ومسؤول عمل واحد
اختر سير عمل واحداً ومجموعة واحدة من المستندات المصرح بها وشخصاً واحداً مسؤولاً عن جودة الإجابات. حدّد الإصدارات القديمة والمتعارضة، وقرّر أولاً أي مستند هو المرجع. - أنشئ مجموعة التقييم قبل الضبط
اتبع منهجية الموارد: أسئلة واقعية يومية، ومقارنات بين المستندات، وأسئلة يجب الامتناع عنها لغياب الدليل، واختبارات للصلاحيات. اتفق على المجموعة والحدود قبل رؤية النتائج. - قارن المرشحين على المجموعة نفسها
ثبّت المستندات والتعليمات وإصدارات النماذج. يقارن مراجعو الأعمال الصحة ودعم الاستشهادات والامتناع وزمن الاستجابة، ويسجلون الوقت اللازم لتصحيح كل إجابة يدوياً. - حدّد التشغيل والتكلفة قبل التوسع
وثّق من يحدّث المحتوى ويوافق على الوصول ويراجع الإجابات الخاطئة ويتعامل مع تغيّر النماذج، واحصر كل استدعاء لنموذج خارجي. احسب الاستضافة والاستدلال والاستيراد والدعم والمراجعة البشرية قبل التوسع.
أخطاء شائعة
- الاستعاضة عن اختبار بياناتكم بلوائح التصنيف العامة
تعكس التصنيفات مهام عامة، لا مستنداتكم ومصطلحاتكم ولغتكم. الأداء على مجموعة التقييم نفسها هو أساس الاختيار. - تبديل الأسئلة الصعبة بعد رؤية النتائج
إزالة الحالات الفاشلة من المجموعة تشوّه التقييم. احتفظ بالنتائج الفاشلة وافصل أسئلة الضبط عن الاختبارات المحجوزة لتعرف كيف سيتصرف المساعد في الإنتاج. - مساواة الإتاحة مفتوحة المصدر بالاستخدام التجاري الحر
تحمل التراخيص مفتوحة المصدر شروطاً إضافية، مثل قيود تعدد المستأجرين والعلامة التجارية. تحقق من ترخيص الإصدار الدقيق وشروط الاستضافة قبل الإطلاق.
ما يجب تسجيله أثناء التجربة
دوّنوا هذه المؤشرات قبل بدء الاختبار، ليستند القرار إلى أرقام جمعتموها بأنفسكم لا إلى الانطباعات.
- الإجابات الصحيحة على مجموعة التقييم
نسبة الأسئلة المُجابة بشكل صحيح وفق مراجع الأعمال، مع تقرير منفصل للأسئلة اليومية والمقارنات بين المستندات وأسئلة اللغة المستهدفة. - نسبة دعم الاستشهادات
نسبة الاستشهادات التي تدعم الإجابة فعلاً عند فتحها. تُحتسب الإجابة ذات الاستشهاد الشكلي غير مدعومة. - حالات الامتناع الصحيحة
كم مرة يرفض المساعد الأسئلة التي لا إجابة لها في المستندات، وكم مرة يختلق إجابة بدلاً من ذلك. - نتائج اختبار الصلاحيات
عدد الأسئلة الخاصة بالأدوار التي استطاع فيها مستخدم استرجاع مستند خارج صلاحياته. العدد المقبول هو صفر. - دقائق المراجعة والتكلفة لكل إجابة
متوسط الوقت الذي يقضيه المراجع في فحص إجابة أو تصحيحها، إلى جانب تكلفة الاستضافة والاستدلال والاستيراد شهرياً.
المصطلحات الأساسية في هذه الصفحة
تستخدم عروض الأسعار وأوراق المواصفات ووثائق SDK المصطلحات الإنجليزية عادةً، لذلك نعرض كل مصطلح بالعربية والإنجليزية معاً مع المعنى الذي نقصده به في هذه الصفحة والموارد وعروض الأسعار.
- مجموعة التقييم Evaluation set
- قائمة ثابتة من الأسئلة الحقيقية مع الإجابات المتوقعة والمصادر ومعايير النجاح، يُتفق عليها قبل أي ضبط. وهي المقياس لكل مرشح.
- التوليد المعزَّز بالاسترجاع (RAG) Retrieval-augmented generation (RAG)
- النهج الذي يسترجع فيه المساعد مقاطع من مستنداتكم ويجيب منها، بدلاً من الاعتماد على بيانات التدريب العامة وحدها.
- الاستشهاد Citation
- المرجع الذي يعرضه المساعد للإجابة. لا يُحتسب الاستشهاد إلا إذا كان المقطع المستشهد به يدعم العبارة فعلاً عندما يفتحه المراجع.
- سلوك الامتناع Refusal behavior
- ما يفعله المساعد عندما لا تحتوي المستندات على إجابة. الامتناع الصحيح نجاح؛ والإجابة المختلقة فشل حتى لو بدت معقولة.
- حدود الصلاحيات Permission boundary
- القاعدة التي تقضي بأن يسترجع كل دور مستخدم المستندات المسموح له بها فقط، وتُختبر بأسئلة خاصة بكل دور.
- مسؤول العمل Business owner
- الشخص المسمّى المسؤول عن جودة الإجابات وتحديث المستندات وقرار التوسع أو التوقف.
- الاختبار المحجوز Held-out test
- أسئلة تُحفظ بعيداً عن الضبط وتُشغَّل في النهاية فقط، لتُظهر النتيجة كيف يتصرف المساعد مع أسئلة لم يُعدَّل لها.
- التكلفة التشغيلية الكاملة Total running cost
- الاستضافة والاستدلال والاستيراد والترخيص والدعم ووقت المراجعة البشرية مجتمعةً شهرياً، لا سعر واجهة النموذج وحده.
ما يجب التحقق منه
يجب الاتفاق على نطاق التنفيذ وتراخيص البرمجيات. الإتاحة مفتوحة المصدر لا تعني حقوق إعادة بيع غير مقيدة.
الأسئلة الشائعة
كم مستنداً نحتاج للبدء؟
ابدأ بالمستندات المصرح بها التي يحتاجها سير عمل واحد؛ غالباً تكفي بضع عشرات لبناء مجموعة تقييم ذات معنى. النطاق الصغير المرجعي أكثر قيمة من أرشيف كبير غير منقّى.
هل يرسل التقييم مستنداتنا إلى أطراف ثالثة؟
يعتمد ذلك على طريقة النشر وخدمات النماذج المختارة. حتى التطبيق المستضاف ذاتياً قد يرسل بيانات إلى خدمات نماذج أو صوت خارجية. نقترح التقييم بمستندات غير حساسة أولاً وحصر كل تدفق للبيانات.
هل تتولى CNPS التنفيذ؟
تساعد CNPS أولاً في تحديد النطاق ومجموعة التقييم والقبول. أما القدرة على التنفيذ والنطاق التجاري وتراخيص البرمجيات فيُتفق عليها بشكل منفصل لكل احتياج، ولا تُدرج تلقائياً في مرحلة التقييم.
هل يمكن أن يعمل المساعد بالكامل على خوادمنا؟
النشر المستضاف ذاتياً ممكن مع عدة تطبيقات مفتوحة المصدر، لكن نماذج اللغة والتضمين والصوت التي يستدعيها قد تظل خدمات خارجية. احصروا كل استدعاء قبل تحديد ما يعنيه «النشر المحلي» لبياناتكم.
كيف نحافظ على حداثة الإجابات عند تغيّر المستندات؟
سمّوا الشخص الذي يحدّث المحتوى، وحدّدوا كيف تُزال المستندات المسحوبة من الاسترجاع، وأعيدوا تشغيل جزء من مجموعة التقييم بعد كل تحديث مهم. المساعد بلا روتين تحديث يتقادم بصمت.
أي اللغات يمكن تقييمها؟
يمكن إدراج أسئلة بالصينية والإنجليزية والعربية جميعها، لكن الأداء يختلف باختلاف لغة السؤال ولغة المستند. أدرجوا أسئلة اللغة المستهدفة في مجموعة التقييم بدلاً من افتراض انتقال النتائج.
تابع الاستكشاف
- Dify في اليابان: من التجارب إلى سير العمل المؤسسي
- Qwen وDeepSeek: تسهيل التقييم الأول
- RAGFlow: قيّم طبقة المستندات أولاً
- حدد نطاق مساعد ذكاء اصطناعي يستند إلى المستندات
لا تُعرض المراجع القطاعية على أنها مشاريع سلّمتها CNPS لعملائها.