قياس جودة خدمة العملاء بمساعدة الذكاء الاصطناعي : هل حُلّت المشكلة فعلًا ؟

يصبح قياس جودة خدمة العملاء بالذكاء الاصطناعي مفيدًا عندما يربط التقييم بين طلب العميل ، والرد الذي تلقاه ، والإجراء الذي نُفّذ . فالإجابة السريعة والمهذبة قد تكون صحيحة لغويًا ، بينما يظل الطلب معلقًا أو يحصل العميل على نتيجة مختلفة عما يحتاجه .

تخيّل أن عميلًا طلب استخراج تقرير شهري من نظام إدارة متجره . وصله رد يقول : ( أصبح التقرير جاهزًا للتحميل ) ، ثم سُجلت التذكرة محلولة . لكن سجل النظام يُظهر أن مهمة إعداد التقرير ما زالت قيد المعالجة . هل نقيس نجاح الخدمة من الرسالة أم من النتيجة التي يستطيع العميل استخدامها ؟

في هذا الدليل نبني بطاقة مراجعة ، ونطبقها على عينة افتراضية ، ثم نوضح كيف يساعد المساعد الذكي في استخراج الأدلة دون أن ينفرد بالحكم . المثال والأرقام من إعدادنا للتوضيح ، وليست نتائج تجربة على منصة أو تقييمًا لفريق حقيقي .

1. اتفق أولًا على معنى ( حُلّت المشكلة )

قبل تقييم المحادثة ، اكتب ما الذي يجب أن يتحقق في هذا النوع من الطلبات . في مثال التقرير الشهري ، لا يكفي تشغيل مهمة التصدير ؛ المطلوب ملف صالح يغطي الفترة المطلوبة ، ويمكن للعميل المصرح له الوصول إليه .

أما في سؤال معلوماتي ، فقد تكون النتيجة شرحًا صحيحًا وكافيًا يستند إلى إجراء معتمد . وقد تتضمن المعالجة السليمة توضيح سبب عدم إمكانية تنفيذ طلب يخالف شروط الخدمة ، بدل تقديم وعد لا يمكن الوفاء به .

افصل بين ثلاثة أمور :

• حالة التذكرة : ما سجله النظام ، مثل ( محلولة ) أو ( مغلقة ) .
• جودة المعالجة : صحة فهم الطلب والمعلومات والإجراء والتواصل .
• نتيجة الخدمة : ما ثبت تحققه وفق تعريف واضح ومناسب للطلب .

حتى أسماء المؤشرات قد توحي بأكثر مما تقيس . مثلًا، توضح Zendesk أن مؤشر الحل بلمسة واحدة يعتمد على تذاكر محلولة أو مغلقة لها رد واحد من الموظف أو دون ردود ، وفق شروط احتسابه . لذلك ، لا تتعامل مع اسم المؤشر بوصفه فحصًا مستقلًا لنجاح الإجراء .

وسجّل وقت المراجعة ؛ فقد تكون المهمة قيد التنفيذ عند الفحص وتكتمل لاحقًا . وصفها بأنها تحتاج إلى متابعة أدق من إعلان نجاحها ، كما أنه لا يعني وحده أن الموظف أخطأ أو تجاوز المهلة المعتمدة .

2. أنشئ بطاقة تقييم لا تخفي الأخطاء داخل متوسط عام

تصف Zendesk بطاقة ضمان الجودة بأنها نموذج يضم فئات تقييم لمراجعة محادثات العملاء . الفكرة المفيدة هنا هي تقسيم الجودة إلى أسئلة محددة يمكن للمراجع تفسير إجابته عنها .

نقترح لهذا الدليل خمسة معايير : فهم الطلب، وصحة المعلومات ، ونتيجة الإجراء ، ووضوح الخطوة التالية ، وحماية البيانات . هذه بطاقة تعليمية قابلة للتعديل ، وليست معيارًا إلزاميًا أو درجة جاهزة لجميع المنشآت .

امنح كل معيار إحدى الحالات التالية :

• مستوفى : يوجد دليل يدعم تحقق المعيار .
• غير مستوفى : يوجد دليل يوضح عدم تحققه .
• غير منطبق : المعيار لا يخص هذا الطلب ، مع بيان السبب .
• أدلة غير كافية : المعيار ينطبق ، لكن السجلات لا تسمح بالحكم .

لا تستخدم ( غير منطبق ) بدل ( لا أعرف ) . إذا كانت المهمة تتطلب استخراج ملف ولم يتوافر سجل التنفيذ ، فالمشكلة نقص الأدلة ، لا أن فحص النتيجة غير ضروري .

واجعل الأخطاء المهمة ظاهرة منفصلة. مشاركة بيانات مع شخص غير مخوّل أو إعطاء تعليمات تخالف الإجراء المعتمد لا ينبغي أن تختفيا خلف نقاط مرتفعة للتحية والأسلوب. يمكنك قياس وضوح اللغة، لكن لا تجعله يعوض خطأً في المحتوى أو الصلاحيات.

3. مثال عملي : رد سريع في 90% من الطلبات ، ونتيجة متحققة في 60%

لنفترض أننا اخترنا 20 طلبًا لاستخراج تقارير شهرية ، وجميعها مسجلة في النظام بوصفها محلولة . راجعنا الطلبات والملفات وسجلات التنفيذ عند موعد الفحص المحدد .

في المثال ، تلقى 18 طلبًا أول رد من موظف خلال عشر دقائق ؛ لذلك بلغت نسبة الالتزام بهدف الرد 18 ÷ 20 × 100 = 90% . العشر دقائق هدف افتراضي لهذا المثال ، وليست معيارًا عامًا ، ولا يشمل القياس رسالة الاستلام الآلية .

أما مراجعة النتيجة فأظهرت :

• 12 طلبًا بنتيجة متحققة : الملف موجود ، ويغطي الشهر المطلوب ، والوصول إليه متاح ضمن الصلاحيات .
• 4 طلبات تحتاج إلى متابعة : مهمة إعداد الملف ما زالت قيد التنفيذ .
• طلبان بنتيجة غير متحققة : أحدهما يحتوي تقريرًا لشهر مختلف ، والآخر انتهت مهمة تجهيزه بخطأ .
• طلبان بأدلة غير كافية : لم تتوافر سجلات تسمح بالتأكد من النتيجة .

نسبة النتيجة المتحققة في العينة هي 12 ÷ 20 × 100 = 60% . أبقينا الطلبين غير القابلين للتحقق ضمن العينة ، وعرضنا نقص الأدلة بصورة مستقلة ، بدل حذفهما بصمت ورفع النسبة .

هذه ليست نسبة رضا العملاء ، ولا معدل الحل من أول تواصل ، ولا نسبة نجاح النظام كله . إنها نسبة الطلبات التي استطعنا إثبات نتيجتها في عينة محددة عند المراجعة .

كذلك ، لا نصف الطلبات الثمانية الأخرى كلها بأنها فشل نهائي ؛ أربعة منها قيد التنفيذ واثنان يفتقران إلى الأدلة . لكل فئة إجراء مختلف ، وهو ما سيضيع إذا اختصرنا التقرير في عبارة ( الجودة ضعيفة ) .

ولأن العينة تعليمية وصغيرة ، لا نستخدمها لتعميم حكم على فريق أو فترة تشغيل كاملة . في العمل الفعلي ، وضّح طريقة اختيار العينة وأنواع الطلبات والقنوات التي شملتها .

4. استخدم الذكاء الاصطناعي لاستخراج الأدلة وكتابة مسودة التقييم

زوّد المساعد بالمحادثة ذات الصلة ، والإجراء الساري وقتها ، وملخص سجل التنفيذ ، وتعريف النتيجة المطلوبة . استخدم بيئة معتمدة ، واستبدل المعرّفات الشخصية برموز متى كان ذلك كافيًا ، ولا تمنح المراجع أو الأداة وصولًا يتجاوز حاجتهما .

توضح وثائق Microsoft أن تقييم الجودة يمكن أن يعمل وفق إطار يحدده المشرف ، يضم أسئلة وخيارات إجابة ومنطق تقييم وإرشادات . وتتيح أيضًا تعديل إجابات التقييم لتصحيح تفسير الذكاء الاصطناعي وإعادة توليد الملخص .

يمكنك تطبيق المبدأ دون شراء منصة جديدة ، باستخدام بطاقة واضحة ومساعد معتمد ، ثم إصدار الحكم النهائي بعد المراجعة .

نموذج أمر جاهز للتعديل :

راجع طلب الخدمة المرفق وفق بطاقة المعايير والإجراء المعتمد . استخرج أولًا ما طلبه العميل ، وما وعد به الرد ، وما يثبته سجل التنفيذ عند وقت المراجعة المحدد .

لكل معيار ، اختر : مستوفى ، أو غير مستوفى ، أو غير منطبق ، أو أدلة غير كافية . أرفق اقتباسًا قصيرًا أو مرجع السجل الذي يدعم الحكم ، واذكر المعلومات الناقصة عند الحاجة .

صنّف نتيجة الطلب بصورة مستقلة : متحققة ، أو تحتاج إلى متابعة ، أو غير متحققة ، أو غير قابلة للتحقق بالأدلة المتاحة .

لا تستنتج نجاح الإجراء من عبارة «تم» أو من إغلاق التذكرة وحدهما. ولا تعامل عدم رد العميل بوصفه تأكيدًا على الحل.

إذا وجدت تعارضًا بين الرد والسجل ، أظهره . لا تخمّن سبب التعارض أو تنسبه إلى موظف دون دليل . اختم بإجراء متابعة محدد ، ولا تصدر قرارًا وظيفيًا أو درجة نهائية معتمدة .

في مثالنا ، ينبغي أن يكشف التقييم الفرق بين ( أصبح التقرير جاهزًا ) و ( مهمة التصدير قيد المعالجة ) . هذه نتيجة أكثر فائدة من مدح صياغة الرد أو اقتراح إضافة اعتذار دون معالجة المعلومة الخاطئة .

5. اختبر أحكام المساعد وتحقق مما لم يقيّمه

أ. قارن الحكم بدليله

ابدأ بمجموعة صغيرة يراجعها شخص مختص مستقلًا عن مسودة الأداة ، ثم قارن النتيجتين . عند الاختلاف ، افحص موضعه : هل تجاهلت الأداة سجلًا ، أم أساءت فهم النفي ، أم أن المعيار نفسه غامض ؟

إذا اختلف مراجعان بشريان أيضًا ، فقد تحتاج بطاقة التقييم إلى أمثلة أو تعريفات أوضح . عدّل المعيار ثم اختبره على حالات أخرى قبل الاعتماد عليه بصورة أوسع .

هذا تطبيق عملي لفكرة كيف تختبر جودة إجابة الذكاء الاصطناعي بدل الاكتفاء بأنها تبدو جيدة : صحة الحكم تتطلب أن يدعمه النص أو السجل ، لا أن تبدو مبرراته مقنعة فقط .

ب. راقب تغطية التقييم

لا تفترض أن كل تذكرة حصلت على تقييم آلي . تذكر وثائق Zendesk شروطًا للمحادثات التي يقيّمها AutoQA ، وتوضح استبعاد حالات ، منها المحادثات التي لا تتضمن سياقًا كافيًا .

لذلك ، سجّل عدد الطلبات المختارة ، وما تمت مراجعته ، وما استُبعد ، وأسباب الاستبعاد . ارتفاع متوسط الجودة بين الطلبات المقيمة لا يخبرك وحده بحالة الطلبات التي لم يشملها التقييم .

واحفظ نسخة بطاقة المعايير المستخدمة . إذا تغيّر تعريف ( نتيجة متحققة ) ، فلا تقارن النسب القديمة بالجديدة دون توضيح التغيير .

6. حوّل التقييم إلى إصلاح يمكن متابعته

اربط كل ملاحظة بمشكلة وإجراء ومسؤول ، بدل الاكتفاء بإرسال درجة إلى الفريق .

في الطلبات الأربعة التي ما زالت قيد التنفيذ ، تحقّق من المسؤول عن متابعة اكتمال الملف وما ينبغي إبلاغ العميل به . وإذا كان الرد يوحي بالجاهزية قبل اكتمال العمل ، فراجع طريقة كتابة ردود خدمة العملاء دون وعود غير معتمدة .

وفي التقرير الذي يغطي شهرًا مختلفًا ، افحص مصدر الخطأ : هل فُهم طلب العميل بصورة غير صحيحة ، أم انتقلت فترة خاطئة إلى إجراء التصدير ؟ تختلف المعالجة باختلاف الدليل .

أما الحالة التي انتهت بخطأ تقني ، فتحتاج إلى متابعة تنفيذية ، والحالتان ناقصتا الأدلة تحتاجان إلى تحسين إتاحة السجل للمراجع المخوّل أو اكتمال توثيقه . لا تعالج كل هذه الحالات بتدريب لغوي واحد .

عند تكرار خطأ في التعليمات ، صحّح مصدرها داخل قاعدة معرفة لخدمة العملاء ، ثم اختبر الرد الجديد . وعند تعديل نموذج الرد أو الإجراء ، راجع طلبات لاحقة بالمعايير نفسها لمعرفة ما إذا كانت المشكلة تراجعت .

استخدم النتائج لتحسين الخدمة والتدريب ، ولا تجعل درجة النموذج وحدها أساسًا لترتيب الموظفين أو معاقبتهم . وتوضح Microsoft أن ميزة تقييم الجودة لديها ليست مخصصة لاتخاذ قرارات تؤثر في توظيف الموظفين أو تعويضاتهم وحقوقهم .

7. الخلاصة

يتطلب قياس جودة خدمة العملاء بالذكاء الاصطناعي تعريفًا واضحًا للحل ، ومعايير منفصلة ، وأدلة يمكن الرجوع إليها . في مثالنا ، تحقّق هدف سرعة الرد في 90% من الطلبات ، بينما ثبتت النتيجة في 60% فقط ؛ وكل مؤشر أجاب عن سؤال مختلف .

ابدأ بعينة تستطيع مراجعتها ، وحدّد ما طلبه العميل وما نُفّذ بالفعل . استخدم المساعد لتنظيم الأدلة وإظهار التعارضات ، ثم حوّل الملاحظات إلى إجراءات محددة .

جودة الخدمة تظهر عندما يحصل العميل على معالجة صحيحة وواضحة يمكن التحقق منها ، وتبقى المهام غير المكتملة ظاهرة للمتابعة بدل أن تختفي خلف تذكرة مغلقة .