ابتسامة المتدرب ليست عائدًا على الاستثمار: كيف تقيس أثر التدريب من القاعة إلى نتائج العمل؟

الملخص التنفيذي

من أسهل الأرقام التي يمكن لإدارة التدريب جمعها أن تقول إن المشاركين أعطوا البرنامج تقييمًا مرتفعًا. الرقم مفيد: يخبرنا أن التجربة كانت مقبولة أو ذات صلة أو جيدة التقديم. لكنه لا يجيب وحده عن السؤال الذي يهم المدير التنفيذي: هل تعلّم الناس شيئًا؟ هل استخدموه في العمل؟ وهل تغيّرت نتيجة تجارية بسبب التدريب؟

الخلط بين هذه الأسئلة ينتج واحدة من أكثر مشكلات Training Effectiveness شيوعًا. قد يخرج المتدرب سعيدًا من القاعة من دون اكتساب مهارة جديدة. وقد يجتاز اختبار المعرفة ولا يطبق ما تعلمه. وقد يغير سلوكه فعلًا، ثم ترتفع المبيعات في الوقت نفسه بسبب حملة إعلانية أو موسم قوي أو تحسن المخزون. لذلك لا يجوز التعامل مع Reaction وLearning وBehavior وBusiness Results كما لو كانت مراحل تضمن إحداها الأخرى تلقائيًا.

تصلح شهادة شركة المركزية، وكلاء مجموعة المناصير في الأردن، مثالًا ممتازًا على أهمية هذا التفريق. الإدارة ذكرت أن البرنامج امتد ستة أيام، وأنها لمست تطورًا في الشباب، وذكرت اختبارات بيع سريعة وتحرك بعض المنتجات التي كانت راكدة. هذه معلومات أقوى من «أعجبنا التدريب»، لأنها تشير إلى سلوك ونتيجة مبكرة. لكنها تظل شهادة عميل وصفية: لا تتوافر بيانات خط أساس منشورة، ولا مجموعة مقارنة، ولا معلومات كافية لعزل الموسم والمخزون والتسعير والحملات وبقية المتغيرات. لذلك يمكن القول إن العميل لاحظ تغيرًا متزامنًا مع التدريب، ولا يمكن علميًا الجزم بحجم الأثر المالي السببي للتدريب وحده.

يميز مركز السيطرة على الأمراض الأمريكي بين Outcome Evaluation الذي يحدد ما إذا كانت النتائج المستهدفة قد تحققت، وبين Impact Evaluation الذي يقارن النتائج بما كان سيحدث في غياب البرنامج لمحاولة تحديد السببية. CDC Program Evaluation Framework.

يقترح المقال إطار IMPACT-6، وهو إطار تنفيذي مقترح من الكاتب: Intent، Measure Baseline، Prove Learning، Application، Commercial Outcome، Test Attribution. الفكرة ليست قياس كل برنامج بأقصى تعقيد ممكن، بل اختيار مستوى الدليل الذي يناسب حجم القرار والمخاطر والتكلفة.

المبدأ الإداري: الرضا ليس تعلمًا، والتعلم ليس تطبيقًا، والنتيجة ليست سببية

يمكن تقسيم سؤال أثر التدريب إلى أربع طبقات معروفة: Reaction، Learning، Behavior، Results. هذه الطبقات مفيدة لأنها تمنعنا من الاكتفاء بسؤال واحد. لكنها تصبح خطرة عندما تُقرأ كسلّم سببي تلقائي: «أعجبهم التدريب، إذن تعلموا؛ تعلموا، إذن طبقوا؛ طبقوا، إذن الأرباح زادت بسبب التدريب».

كل طبقة من القياس تجيب عن سؤال مختلف. لا تستخدم دليلًا من طبقة لتدّعي نتيجة من طبقة أعلى.

انتقد Elwood Holton نموذج المستويات الأربعة عندما يُعامل كنموذج سببي، واعتبره أقرب إلى تصنيف للنتائج لأنه لا يحدد بنفسه المتغيرات الوسيطة ولا العلاقات السببية بينها. Holton, 1996.

خلفية الحالة: شركة المركزية — ماذا تعني عبارة «شفنا فرق» علميًا؟

وفق شهادة أ. أياد، رئيس مجلس إدارة شركة المركزية وكلاء المناصير في الأردن، كانت الشركة تبيع بالفعل وتسعى إلى الارتقاء من الأداء الجيد إلى مستوى أعلى. وتذكر الشهادة المنشورة أن البرنامج امتد ستة أيام، وأن الإدارة لاحظت تطورًا في أداء الشباب، وأشارت إلى اختبارات بيع سريعة وتحرك بعض المنتجات التي لم تكن تتحرك. المصدر المباشر: شهادة شركة المركزية.

تحدي الأعمال: لماذا تقع الشركات في فخ Smile Sheets؟

الرضا هو أسهل شيء يمكن جمعه

الاستبيان يوزع في آخر دقائق الدورة، والجميع حاضر، والبيانات تصل فورًا. أما قياس السلوك بعد العودة إلى العمل فيحتاج إلى مدير، ونظام، وملاحظة، ووقت، وربما بيانات من CRM أو خدمة العملاء.

المتدرب نفسه قد يخلط بين الشعور بالمعرفة والمعرفة

حللت Sitzmann وزملاؤها صلاحية التقييم الذاتي للمعرفة. وجدت المراجعة أن أقوى علاقات التقييم الذاتي كانت مع الدافعية والرضا، بينما كانت علاقته بالتعلم المعرفي متوسطة. كما وجد الباحثون أن نحو ثلث دراسات التقييم التي فحصوها فسرت التقييم الذاتي للمعرفة كدليل على التعلم المعرفي. Sitzmann et al., 2010.

نتائج الأعمال أسهل في الادعاء من الإثبات

إذا ارتفعت المبيعات بعد الدورة، يمكن أن يكون التدريب أحد الأسباب، لكن قد تتزامن معه حملة، أو زيادة مخزون، أو تغيير سعر، أو موسم، أو تغير منافس. مقارنة «قبل/بعد» تصف التغير؛ لكنها لا تعزل وحدها ما كان سيحدث من دون التدريب.

البحث والتشخيص: ماذا يخبرنا العلم عن كل طبقة؟

1. Reaction — هل وجد المتدرب التدريب جيدًا وملائمًا؟

Reaction ليست عديمة القيمة. لكنها ليست Proxy للتعلم. مراجعة وتحليل تجميعي لـSitzmann وزملائها جمعت 71 دراسة و14,101 متدربًا. كان أسلوب المدرب من أقوى المتنبئات بالـReaction بمعامل ρ = .66، يليه التفاعل الإنساني ρ = .56. Sitzmann et al., 2008.

2. Learning — هل اكتسب معرفة أو مهارة؟

توصي إرشادات CDC باستخدام تقييم قبلي وبعدي عندما يكون الهدف قياس التغير في التعلم، وتوضح أن الاختبار البعدي وحده لا يخبرنا هل حدث تغير لأن المتعلم ربما كان يعرف المادة قبل التدريب. كما توصي بإدخال Demonstration عندما يكون الهدف مهاريًا. CDC — Measuring Training Effectiveness.

3. Behavior — هل يستخدم ما تعلمه في العمل؟

Meta-analysis لـBlume وزملائه جمع 89 دراسة تجريبية في Transfer of Training، ووجد علاقات إيجابية بين النقل وعوامل تشمل الدافعية وبيئة العمل الداعمة وخصائص المتدرب والتدخل. Blume et al., 2010.

4. Results — هل تغير KPI تجاري؟

يمكن قياس التحويل، أو الاحتفاظ، أو المرتجعات، أو قيمة السلة، أو زمن إغلاق الصفقة، أو جودة CRM بحسب هدف البرنامج. هنا نعرف إن كانت النتيجة تحركت. لكن هذا لا يساوي بعدُ إثبات أن التدريب هو السبب.

5. Attribution — ماذا كان سيحدث من دون التدريب؟

توضح إرشادات CDC أن Outcome Evaluation يقيس تحقيق النتائج لكنه لا يحدد السببية، بينما Impact Evaluation يقارن النتائج بتقدير لما كان سيحدث في غياب البرنامج. CDC Evaluation Design.

رؤى الحالات: ثلاثة عملاء، وثلاث درجات مختلفة من الدليل

المركزية — لدينا إشارات سلوك ونتائج، لكن لا نملك Attribution كافيًا

حالة المركزية هي الأقوى في المواد المتاحة من حيث ظهور إشارات تتجاوز الرضا: ملاحظة أداء، تطبيق سريع، وتحرك بعض المنتجات. ومع ذلك لا يمكن القفز إلى ROI سببي لأن بيانات المقارنة والتكاليف والعوامل المصاحبة غير متاحة بالكامل.

أرض الخليج للعطور — «أفكار كانت غائبة» دليل تعلم مدرك أكثر من كونه نتيجة تجارية

في شهادة شركة أرض الخليج للعطور في العراق، قال مسؤولو الشركة إن المندوبين حصلوا على أفكار تسويقية كانت غائبة عنهم، وإن الإدارة والمندوبين استفادوا من الملاحظات. هذا دليل نوعي مهم على Reaction وPerceived Learning. لكنه لا يقدم في الشهادة قياسًا قبليًا وبعديًا لسلوك المندوبين، ولا بيانات مبيعات تسمح بإسناد أثر مالي إلى التدريب.

شركة معمار — سهولة فهم النظريات لا تساوي بعدُ تغير السلوك

في أرشيف شهادات المشروع، تصف شهادة محمد جمال من شركة معمار قيمة ربط الخبرة الأكاديمية بالحواديت والممارسات، وأن هذا جعل فهم التسويق والمبيعات والإدارة أسهل. هذا يدعم Perceived Understanding وRelevance. لكنه لا يثبت أن المشاركين طبقوا المهارات أو أن نتيجة تجارية تغيرت.

الحل الاستراتيجي: لا تسأل «هل نجح التدريب؟» بسؤال واحد

التنفيذ: كيف تبني خطة قياس قبل أن يبدأ التدريب؟

1. ابدأ بالقرار الذي تريد اتخاذه، لا بالبيانات المتاحة

هل تريد تحسين البرنامج القادم؟ إثبات أن المشاركين تعلموا؟ تحديد من يحتاج Coaching؟ تقرير ما إذا كنت ستوسع البرنامج لكل الفروع؟ أم حساب عائد مالي؟ كل قرار يحتاج مستوى مختلفًا من القياس.

2. عرّف السلوك قبل الـKPI

إذا كان الهدف «رفع المبيعات»، اسأل ما السلوك الذي يفترض أن يغيره التدريب: جودة التأهيل؟ اكتشاف الاحتياج؟ متابعة الفرص؟ تقديم القيمة؟ البيع الإضافي؟ من دون هذه الحلقة، لن تعرف لماذا تحرك KPI أو لم يتحرك.

3. التقط Baseline قبل التدخل

هذا جزء أساسي في نموذج Request4Training الحالي: يسأل عن المؤشر المطلوب تحسينه، وخط الأساس، والهدف، والقياس القبلي والبعدي، وخطة المتابعة. هذه المعلومات يجب أن تُجمع قبل أن تختفي نقطة المقارنة.

4. استخدم اختبارًا يطابق المهارة

لا تقيس التفاوض بسؤال Multiple Choice فقط، ولا تقيس المعرفة الدوائية بانطباع المدير. إذا كان الهدف أداء مكالمة، استخدم مكالمة أو محاكاة بمعيار تقييم. إذا كان الهدف معرفة، استخدم اختبارًا معرفيًا صالحًا للهدف.

5. افصل بين Leading Indicators وLagging Indicators

المؤشرات الرائدة أقرب إلى السلوك الذي يستهدفه التدريب: جودة التأهيل، الالتزام بخطوات الزيارة، جودة استخدام CRM أو زمن الرد. المؤشرات المتأخرة هي نتائج أبعد: الإيراد، الاحتفاظ، الربحية. الربط بين الاثنين يصنع قصة تفسير أقوى، لكنه لا يثبت السببية وحده.

6. خطط لقياس Transfer في بيئة العمل

يجب تحديد من سيراقب السلوك، وأين، وكيف، وما معيار الجودة. إذا لم يوجد مدير أو نظام يستطيع رؤية التطبيق، فقياس Behavior سيظل تخمينًا.

7. سجل العوامل الخارجية

خلال فترة القياس، وثق تغيرات السعر، والحملات، والمواسم، والمخزون، وتغيير المناطق، ودخول منافس، وتغيير أفراد الفريق. الهدف ليس التخلص من كل Confounder، بل منع ادعاء أن التدريب عمل في فراغ.

8. استخدم مجموعة مقارنة عندما تكون قيمة القرار تستحق

إذا كانت الشركة ستستثمر على نطاق واسع، يمكن في بعض الحالات تطبيق البرنامج على فرق أو فروع في مرحلة أولى ومقارنة تغيرها بفرق مشابهة لم تبدأ بعد. ويمكن لبعض التصاميم شبه التجريبية استخدام Difference-in-Differences لمقارنة تغير مجموعة التدخل بتغير مجموعة مقارنة عبر الفترة نفسها، مع ضرورة فحص افتراضات الطريقة. World Bank — Difference-in-Differences.

9. لا تحسب ROI قبل أن تملك أثرًا يمكن نسبه بدرجة معقولة

التقييم القبلي والبعدي مهم جدًا لقياس التغير في التعلم أو الأداء، لكنه لا يساوي وحده ROI. الحديث عن عائد مالي يتطلب تحديد التكاليف، وتحديد المنفعة، وفصل ما يمكن نسبه إلى التدخل عن التغيرات التي حدثت لأسباب أخرى، مع إعلان الافتراضات.

صفحة تدريب الشركات تؤكد أهمية التقييم القبلي والبعدي ومؤشرات الأداء وخطة التطبيق. هذا المقال يضيف التمييز المنهجي: هذه العناصر تجعل القياس أقوى، لكنها لا تجعل كل تغير لاحق «ROI سببيًا» بصورة تلقائية.

وتأتي هذه الخطوة بعد التشخيص الصحيح للمشكلة؛ فإذا لم تكن المشكلة تدريبية من الأصل، فلن ينقذنا القياس المتقدم من التدخل الخطأ. راجع متى تحتاج إلى Sales Trainer ومتى تكون المشكلة في الإدارة أو الاستراتيجية؟.

الإطار العالمي: IMPACT-6 لقياس Training Effectiveness

IMPACT-6 إطار مقترح من الكاتب وليس مقياسًا أكاديميًا منشورًا. صُمم لربط كل ادعاء بمستوى الدليل الذي يحتاجه.

مبدأ الدليل المتناسب

ليس من المنطقي أن تطلب تجربة عشوائية لإثبات أثر ورشة داخلية صغيرة، كما ليس من المنطقي أن تعتمد على Smile Sheet لتبرير تحول تدريبي واسع ومكلف. يقترح الكاتب المستويات التالية كتوصية تنفيذية وليست معيارًا بحثيًا:

مصفوفة القياس: ماذا تقول وماذا لا تقول؟

المنظور الأكاديمي

Kirkpatrick: خريطة مفيدة، لكن لا تحولها إلى سلسلة سببية تلقائية

قوة المستويات الأربعة أنها تجبر الإدارة على النظر أبعد من رضا المتدرب. ضعف الاستخدام الشائع يظهر عندما نفترض أن ارتفاع كل مستوى ينتج تلقائيًا المستوى التالي. نقد Holton يذكّر بأن تقييم التدريب يحتاج إلى المتغيرات الوسيطة والسياق، لا إلى تصنيف النتائج فقط.

Training Criteria لا تتحرك ككتلة واحدة

Meta-analysis لـAlliger وزملائه فحص العلاقات بين معايير تقييم التدريب ووجد أن نوع Reaction مهم؛ فالانطباع العاطفي البسيط ليس مساويًا لتقدير المنفعة، كما أن العلاقات بين الرضا والتعلم والنقل ليست قوية بما يسمح باستخدام Reaction بدل المقاييس الأخرى. Alliger et al., 1997.

التدريب يمكن أن يكون فعالًا، لكن الفاعلية تعتمد على ما نقيسه

في Meta-analysis لـArthur وزملائهم، ظهرت متوسطات أثر موزونة بالعينة تبلغ d = 0.60 لمعايير Reaction، و0.63 لمعايير Learning، و0.62 لمعايير Behavior، و0.62 لمعايير Results، مع اختلاف أعداد الدراسات والعينات بين كل معيار. فمعيار Learning شمل k = 234 وN = 15,014، وBehavior شمل k = 122 وN = 15,627. هذه النتائج تدعم أن التدريب التنظيمي يمكن أن يكون فعالًا، لكنها لا تقول إن رضا الفرد يتنبأ تلقائيًا بنتيجته التجارية. Arthur et al., 2003.

Transfer هو الحلقة التي تنكسر كثيرًا

علم التدريب يفرق بين اكتساب المعرفة واستخدامها. مراجعة Salas وزملائهم ومراجعة Kraiger وFord تؤكدان أن التصميم والممارسة والتغذية الراجعة وبيئة العمل ودعم النقل كلها عناصر في السلسلة التي تصل التعلم بالأداء. Salas et al., 2012، وKraiger & Ford, 2021.

Attribution سؤال مختلف عن Outcome

هذه نقطة مركزية للمدير التنفيذي. قد يثبت التقرير أن النتيجة تحسنت، لكنه يحتاج تصميمًا أقوى ليقول إن التدريب سبّب التحسن. لا يجب أن نخفي هذا الفرق داخل كلمة «الأثر».

الأدلة البحثية

Practical Measurement Architecture لفرق المبيعات

لتطبيق IMPACT-6 في Sales Training، يمكن للشركة بناء خريطة القياس التالية. الأمثلة ليست معايير عالمية؛ هي أمثلة تنفيذية تُختار حسب هدف البرنامج.

متى تستخدم ROI ومتى لا تستخدمه؟

ROI أداة اقتصادية، وليس شهادة جودة للمدرب. إذا كان البرنامج صغيرًا والغرض منه توحيد معرفة أساسية، فقد تكون تكلفة بناء تصميم سببي واقتصادي كامل أعلى من قيمة القرار نفسه. أما إذا كانت الشركة بصدد استثمار كبير أو تعميم برنامج على شبكة واسعة، يصبح قياس Incremental Impact أكثر أهمية.

قبل استخدام عبارة Corporate Training ROI، يجب على الأقل الإجابة عن أربعة أسئلة:

1. ما التكلفة الكاملة للتدخل، بما فيها وقت الموظفين والعمليات ذات الصلة؟
2. ما المنفعة التي تحققت ويمكن تقييمها اقتصاديًا؟
3. ما الجزء الذي نستطيع نسبه إلى التدريب بدرجة معقولة؟
4. ما الافتراضات التي استخدمناها لتحويل النتيجة إلى قيمة مالية؟

إذا لم نملك الإجابة عن السؤال الثالث، فالأدق استخدام مصطلحات مثل Business Outcome أو Contribution بدل ادعاء ROI سببي كامل.

الدروس العملية

1. لا تستخدم Smile Sheet كدليل على التعلم. استخدمه لقياس تجربة المتدرب وملاءمة البرنامج.
2. لا تستخدم سؤال «هل تعلمت؟» بدل اختبار التعلم. التقييم الذاتي أقرب إلى الشعور بالمعرفة من إثباتها.
3. التقط Baseline قبل التدريب. لا تحاول إعادة بنائه من الذاكرة بعد انتهاء البرنامج.
4. اختبر المهارة بأداء يشبه العمل. المعرفة النظرية لا تكفي عندما يكون الهدف سلوكيًا.
5. اجعل المدير جزءًا من القياس. Behavior يحدث بعد القاعة لا داخلها فقط.
6. اربط Leading Indicator بالـBusiness KPI. اعرف السلوك الذي يفترض أن يحرك النتيجة.
7. سجل العوامل الخارجية. الموسم والحملة والسعر والمخزون والمنافس ليست ضوضاء يجب تجاهلها.
8. لا تقل «التدريب رفع المبيعات» لمجرد أن المبيعات ارتفعت بعده. هذا تغير زمني، لا إثبات سببي وحده.
9. ارفع قوة التصميم كلما كبرت قيمة القرار. برنامج صغير لا يحتاج البحث نفسه المطلوب لتعميم استثمار كبير.
10. اجعل تقرير القياس أداة قرار لا أداة دفاع. النتيجة السلبية الجيدة القياس أكثر قيمة من رقم إيجابي لا يعني شيئًا.

قرار المدير بعد القراءة

قبل اعتماد أي برنامج Corporate Training، اطلب من صاحب المشروع والمدرب إكمال IMPACT-6 على صفحة واحدة: الهدف، وخط الأساس، ودليل التعلم، وطريقة قياس التطبيق، والنتيجة التجارية، وطريقة اختبار Attribution. إذا لم تكن الشركة مستعدة لإثبات السببية، فلا مشكلة؛ لكن يجب أن تصف النتيجة بالاسم الصحيح: Reaction، Learning، Behavior، Outcome أو Contribution، بدل استخدام كلمة ROI لكل تحسن تراه.

وبعد قياس الأثر، يبقى قرار اختيار نوع الخبير نفسه مهمًا؛ راجع Sales Trainer أم Marketing Trainer أم Corporate Trainer؟.

نبذة عن المستشار

د. مصطفى نوارج مستشار تسويق واستراتيجية ومدرب مؤسسي، وتندرج خبرته المهنية ضمن أدوار Corporate Trainer وSales Trainer وMarketing Trainer في برامج الشركات. يعتمد منهجه في التدريب المؤسسي على تشخيص الفجوة، وتخصيص المحتوى، وربط المهارة بسلوك يمكن ملاحظته ومؤشرات يمكن متابعتها، مع الفصل بين شهادة العميل والتغير المرصود والدليل السببي.

يمكن مراجعة برامج تدريب الشركات، ونموذج Request4Training، وشهادات العملاء، والمركز المرجعي الرسمي.

المراجع

1. Arthur, W. Jr., Bennett, W. Jr., Edens, P. S., & Bell, S. T. (2003). Effectiveness of Training in Organizations: A Meta-Analysis of Design and Evaluation Features. Journal of Applied Psychology.
2. Alliger, G. M., Tannenbaum, S. I., Bennett, W. Jr., Traver, H., & Shotland, A. (1997). A Meta-Analysis of the Relations Among Training Criteria. Personnel Psychology.
3. Sitzmann, T., Brown, K. G., Casper, W. J., Ely, K., & Zimmerman, R. D. (2008). A Review and Meta-Analysis of the Nomological Network of Trainee Reactions. Journal of Applied Psychology.
4. Sitzmann, T., Ely, K., Brown, K. G., & Bauer, K. N. (2010). Self-Assessment of Knowledge: A Cognitive Learning or Affective Measure? Academy of Management Learning & Education.
5. Blume, B. D., Ford, J. K., Baldwin, T. T., & Huang, J. L. (2010). Transfer of Training: A Meta-Analytic Review. Journal of Management.
6. Holton, E. F. III (1996). The Flawed Four-Level Evaluation Model. Human Resource Development Quarterly.
7. Salas, E., Tannenbaum, S. I., Kraiger, K., & Smith-Jentsch, K. A. (2012). The Science of Training and Development in Organizations. Psychological Science in the Public Interest.
8. Kraiger, K., & Ford, J. K. (2021). The Science of Workplace Instruction. Annual Review of Organizational Psychology and Organizational Behavior.
9. CDC. Evaluate Training: Measuring Effectiveness.
10. CDC. Evaluate Training: Building an Evaluation Plan.
11. CDC. CDC Approach to Program Evaluation.
12. World Bank. What Are We Estimating When We Estimate Difference-in-Differences?
13. شركة المركزية — وكلاء المناصير: شهادة تدريب المبيعات والتسويق في الأردن.
14. شركة أرض الخليج للعطور — شهادة التدريب التسويقي في العراق.
15. أرشيف شهادات المشروع: محمد جمال — شركة معمار. شهادة وصفية عن سهولة فهم النظريات عبر الربط بين الجانب الأكاديمي والخبرة والحواديت؛ لا تتضمن قياسًا موضوعيًا للسلوك أو النتائج التجارية.