توليف الأدلة وما ينجح فعلًا

هذا لماذا يهم في القيمة العامة

نادرًا ما يملك وزير، أو عمدة، أو مدير برنامج في جمعية خيرية ترف دراسة واحدة نظيفة يتصرّف بموجبها. أكثر ما يحدث أن يحمل المكتب ثلاثة تقييمات متعارضة، ومراجعة أدبيات تستشهد بها انتقائيًا، وجماعة ضغط تلوّح بالتجربة الواحدة التي تناسب قضيتها، وموعدًا نهائيًا تحدّده دورة ميزانية لا وتيرة البحث. يوجد توليف الأدلة لأن الدراسات الفردية ضجيجية: أحجام العينات صغيرة، والسياقات مختلفة، وأي نتيجة واحدة يمكن أن تكون مصادفة، أو ملاءمة محلية لن تنتقل، أو أثرًا حقيقيًا. السؤال الذي يحتاج قائد إجابة عنه نادرًا ما يكون "ماذا وجدت هذه الدراسة الواحدة؟" بل "عبر كل شيء موثوق جُرِّب، ماذا يجب أن أتوقّع لو فعلت هذا هنا، الآن؟"

تجعل نظرية القيمة العامة هذا أكثر من تدقيق تقني. يقوم برنامج مموَّل بموارد جماعية على عرض قيمة سيُصرِّح به المواطنون، بالجملة (انظر الموضوع 2.1 — بطاقة أداء القيمة العامة وأطر النتائج لكيفية بيان تلك العروض وتتبّعها). عرض مبني على دراسة واحدة مُنتقاة انتقائيًا، أو على لا مراجعة أدلة على الإطلاق، ادعاء أضعف على الشرعية من واحد مبني على توليف حذر — وأساس أضعف للقدرة التشغيلية، لأن الموظفين والميزانيات يُلتزَم بهم بقوته. نمت حركة "ما ينجح" — شبكة الهيئات المستقلة التي تقيّم جودة وقوة أدلة السياسة — مباشرة من هذه المشكلة: اتُّخِذت قرارات عامة كثيرة جدًا بناءً على الدراسة الأعلى صوتًا لا الأفضل دعمًا.

المشكلة الأصعب التي يتناولها هذا الموضوع هي ما يفعله قائد حين يكون التوليف نفسه غير حاسم، أو مثيرًا للجدل، أو ببساطة غير متاح في الوقت المناسب. بُنيت تراتبيات الأدلة لتُدخِل نظامًا في قاعدة أدلة فوضوية، لكن مُستخدَمة بلا حذر، "الدليل ليس قويًا بما يكفي بعد" تصبح عذرًا دائمًا لتجنّب قرار لن ينتظره الواقع فعلًا. قائد يفهم كيف يعمل التوليف، وأين حدوده، يستطيع تمييز عدم يقين حقيقي يستحق الحذر من تراتبية تُستخدَم غطاءً للتقاعس.

هذا الموضوع التتمة الطبيعية لمناهج الاستدلال السببي التي يستند إليها التوليف (انظر الموضوع 2.4 — الاقتصاد القياسي للقطاع العام وتقييم البرامج) ويقف إلى جانب، لا بدلًا من، أطر النتائج التي يخدمها التوليف في النهاية (انظر الموضوع 2.1 — بطاقة أداء القيمة العامة وأطر النتائج). قائد يستطيع قراءة مراجعة منهجية، وفهم تقييم "ما ينجح"، والتفكير بوضوح حول الدليل الغائب مقابل السلبي يتّخذ قرارات حيّة أفضل من واحد يستطيع فقط طلب "المزيد من الأدلة" أو قبول أول دراسة تُسلَّم إليه.

المفاهيم الأساسية

المراجعة المنهجية توليف للأدلة حول سؤال محدَّد يستخدم منهجًا صريحًا ومُحدَّدًا سلفًا وقابلًا للتكرار لإيجاد الدراسات وتقييمها ودمجها، بخلاف مراجعة أدبيات سردية، التي تختار المصادر بحسب تقدير المؤلف (ويكيبيديا: المراجعة المنهجية). سماتها المميِّزة بروتوكول مُسجَّل يُكتَب قبل بدء البحث، واستراتيجية بحث تشمل الأدبيات غير المنشورة والرمادية، ومعايير إدراج صريحة، ومنهج معياري لتقييم مخاطرة التحيّز في كل دراسة. هذا ما يفصل مراجعة منهجية عن مقالة مكتوبة جيدًا بحواشٍ: فريق آخر يتبع البروتوكول نفسه سيجد الأدلة نفسها عمومًا ويصل إلى استنتاج مماثل عمومًا.

التحليل التلوي هو التقنية الإحصائية الأكثر اقترانًا بمراجعة منهجية: يجمع أحجام الأثر الكمية من دراسات مستقلة متعددة في تقدير واحد أدقّ، مُرجِّحًا عادة كل دراسة بحجم عينتها وجودتها (ويكيبيديا: التحليل التلوي). التحليل التلوي جيد بقدر جودة الدراسات التي تغذّيه؛ جمع خمس دراسات ضعيفة يُنتج تقديرًا أدقّ لأثر ربما متحيّز، لا أثرًا موثوقًا. لذا يُبلِّغ المحللون عن عدم التجانس — مدى تفاوت نتائج الدراسات أبعد مما تتنبّأ به المصادفة — لأن عدم تجانس عالٍ يشير إلى أن الدراسات لم تكن تختبر فعلًا الشيء نفسه، وقد يُضلِّل رقم مُجمَّع واحد.

تحيّز النشر هو الميل إلى نشر دراسات ذات نتائج إيجابية ودالّة بينما تبقى النتائج الفارغة أو السلبية في درج ملفات باحث، ما يجعل تدخّلًا يبدو أكثر اتساقًا في فعاليته في الأدبيات مما هو فعلًا (ويكيبيديا: تحيّز النشر). مراجعة صارمة تصحّح لهذا بالبحث في سجلات التجارب والتقييمات غير المنشورة، لا مقالات المجلات فقط. قائد يقرأ توليفًا مبنيًا فقط على أوراق منشورة يجب أن يسأل ماذا فعل المراجعون لإيجاد الدراسات التي لم تصل أبدًا إلى الطباعة.

تراتبية الأدلة تُرتِّب تصاميم الدراسات بحسب مدى تحكّمها في التشويش والتحيّز، واضعة عادة التحليلات التلوية للتجارب العشوائية في القمة، ثم التجارب العشوائية المُحكَمة الفردية، ثم التصاميم شبه التجريبية والرصدية، ورأي الخبراء في القاع (ويكيبيديا: تراتبية الأدلة). التجربة العشوائية المُحكَمة تخصِّص المشاركين لتدخّل أو مجموعة مقارنة بالمصادفة، الأداة الأقوى الوحيدة لعزل أثر سببي عن كل شيء آخر يجري حوله (ويكيبيديا: التجربة العشوائية المُحكَمة؛ انظر الموضوع 2.4 — الاقتصاد القياسي للقطاع العام وتقييم البرامج لكيفية بناء هذه التصاميم وتحليلها). التراتبية أداة استدلالية مفيدة فعلًا، لكنها أداة استدلالية، لا قانونًا: دراسة رصدية مُجراة جيدًا لسياسة نادرة أو بطيئة الحركة يمكن أن تتفوّق على تجربة مُجراة بسوء وناقصة القوة، وقائد يعاملها ترتيبًا مطلقًا سيتجاهل أحيانًا الدليل الأكثر صلة لصالح التصميم الأكثر مكانة.

منهج GRADE — تقدير التوصيات وتقييمها وتطويرها والتقدير — يُصيغ رسميًا حكمًا ثانيًا ومنفصلًا لا تصدره التراتبية وحدها: يُقيِّم كلًّا من يقين الأدلة، وباستقلالية، قوة توصية للتصرّف بموجبها، لأن الأدلة القوية لا تبرِّر دائمًا توصية قوية، والأدلة الضعيفة لا تبرِّر دائمًا التقاعس أمام ضرر شديد وعاجل (ويكيبيديا: منهج GRADE). هذا الموضوع هو الفكرة الأكثر فائدة الوحيدة في هذا الموضوع لصانع قرار مضغوط زمنيًا: يتيح لقائد أن يقول، بصدق، "الأدلة هنا متوسطة، ونظرًا للمخاطر وتكلفة الانتظار، أوصي بأن نمضي قدمًا" — حكم قابل للدفاع عنه وموثَّق، بدلًا من خيار زائف بين انتظار اليقين وتجاهل الأدلة كليًا.

تمييز يتكرّر باستمرار في نقاش السياسة الحيّ هو بين غياب الدليل ودليل الغياب: نقص دراسات عن أثر تدخّل ("لا دليل على أثر") ليس الادعاء نفسه بمجموعة دراسات جيدة القوة وجدت إيجابيًا لا أثر ("دليل على لا أثر") (ويكيبيديا: دليل الغياب). برنامج محلي جديد بلا تقييمات بعد لم يُختبَر ببساطة؛ برنامج وطني مدروس جيدًا وُجِد مرارًا أنه لا يحرّك أي نتيجة قد اختُبِر وأُظهِر أنه لا يعمل. الخلط بين الاثنين واحد من أكثر الأخطاء عواقب التي يمكن أن يرتكبها قائد عام: قتل تجربة غير مُختبَرة لكن واعدة كما لو فشلت، أو مواصلة تمويل برنامج فنّده مرارًا كما لو لم ينظر أحد فيه بعناية كافية بعد.

السياسة القائمة على الأدلة هي الحركة الأوسع والادعاء المعياري بأن القرارات العامة يجب أن تُؤسَّس على أدلة راسخة بصرامة بدلًا من الأيديولوجيا أو الحكاية أو الحدس وحده (ويكيبيديا: السياسة القائمة على الأدلة). يفضّل منتقدوها، وبازدياد مؤيدوها أنفسهم، "السياسة المسترشدة بالأدلة"، التي تسلّم بأن الأدلة مُدخَل واحد بين عدة — القيم، والتفويض، والتكلفة، وأسئلة الشرعية التي يعامل هذا الكتاب أساسية — بدلًا من قاعدة قرار آلية تستطيع الأدلة وحدها حسمها.

نمت من هذه الحركة نمط مركز أو بيت مقاصة "ما ينجح": هيئة مستقلة تراجع منهجيًا الأدلة لتدخّلات في مجال سياسة وتنشر تقييمات مقروءة وقابلة للمقارنة، بدلًا من ترك كل مُكلِّف محلي يُجري مراجعته الخاصة. رائدت كوكرين النموذج في الرعاية الصحية منذ 1993، محافظة على دليل حيّ لمنهجية المراجعة المنهجية يُستخدَم أبعد بكثير من الطب (ويكيبيديا: كوكرين (منظمة)). وسّعت تعاونية كامبل المنهجية نفسها إلى السياسة الاجتماعية والعدالة الجنائية والتعليم والتنمية الدولية (ويكيبيديا: تعاونية كامبل). تبعتها بيوت مقاصة وطنية: بيت مقاصة ما ينجح الأمريكي، الذي يديره معهد علوم التعليم منذ 2002، يراجع بحوث التعليم مقابل معايير تصميم صريحة (ويكيبيديا: بيت مقاصة ما ينجح)؛ تنشر مؤسسة الوقف التعليمي الإنجليزية مجموعة أدوات تعليم وتعلّم مستخدَمة على نطاق واسع تقيّم تدخّلات الفصل الدراسي على التكلفة وقوة الأدلة والأثر النموذجي بصيغة واحدة قابلة للمقارنة (ويكيبيديا: مؤسسة الوقف التعليمي). توجد مراكز مماثلة لتقليل الجريمة، والتدخّل المبكر، والتشرّد، والشيخوخة الصحية — عائلة دولية صغيرة مبنية على المنهج نفسه: مراجعة منهجية، وتقييم شفاف، وملخّص موجَّه للممارسين لا يحتاج منهجيًا لقراءته.

أفضل الممارسات

1. اطلب التوليف قبل الدراسة الواحدة. حين تصل نتيجة لافتة إلى مكتبك، اسأل أولًا ما إذا كانت مراجعة منهجية أو تقييم "ما ينجح" موجودًا بالفعل لذلك التدخّل، لا ما إذا كانت الدراسة تبدو مقنعة معزولة.
2. اقرأ المراجعة الأساسية إلى جانب أي تقييم مجموعة أدوات، لا بدلًا منه. تقييم بسطر واحد أو أيقونة قفل يلخّص حكمًا؛ ليس بديلًا لفهم أي دليل يستند إليه وكيف ينطبق مباشرة على سياقك.
3. افصل جودة الدليل عن قوة توصيتك، صراحة. استعِر منطق GRADE حتى بشكل غير رسمي: اذكر مدى يقين الدليل، ثم اذكر منفصلًا مدى قوة ما يبرِّره ذلك اليقين، مقترنًا بالمخاطر والتكلفة، للتصرّف الآن.
4. سمِّ ما إذا كنت تواجه "لا دليل بعد" أو "دليل على لا أثر" قبل أن تقرِّر. ضع هذا التمييز كتابةً في كل موجز أدلة، لأن الوضعين يستدعيان استجابات متعاكسة تقريبًا — تجريب حذر مقابل الإيقاف أو إعادة التصميم.
5. تحقّق من التطابق بين سياق المراجعة وسياقك قبل افتراض أن الأثر سينتقل. حجم أثر مُجمَّع من دراسات أُجريت في مكان آخر متوسط، لا وعد؛ اسأل ما الذي عدَّل الأثر أصلًا وهل تلك المُعدِّلات موجودة هنا.
6. كلِّف بتقييم أدلة سريع حين لن تناسب مراجعة منهجية كاملة جدولك الزمني. مراجعة منظَّمة ومحدودة زمنيًا للأدبيات القائمة — أيام أو أسابيع، لا أشهر — مسار وسط مشروع بين بحث أوّلي جديد ولا مراجعة على الإطلاق.
7. انشر تقييماتك الخاصة بغضّ النظر عن النتيجة. الاكتشافات الفارغة والسلبية قيّمة للتوليف التالي بقدر الإيجابية؛ حجبها يزيد سوءًا تحيّز النشر الذي يقوّض كل مراجعة مستقبلية في مجالك.
8. ابنِ علاقة دائمة مع مركز أو بيت مقاصة "ما ينجح" في مجالك قبل أن تحتاج إليه. البحث بلا سابق معرفة في مجموعة أدوات هيئة توليف لأول مرة أثناء أزمة حيّة أبطأ بكثير من معرفة ما تغطّيه ومن تسأل عن فجوة بالفعل.
9. ثبِّت عتبة أدلتك قبل وصول النتائج، لا بعده. اتفق سلفًا على أي مستوى دليل سيبرِّر التوسيع، أو مزيدًا من التجريب، أو الإيقاف، لتقليل إغراء إعادة تفسير اكتشافات غامضة لتناسب قرارًا اتُّخِذ بالفعل.
10. حدّد وقتًا لبحثك عن دراسة ستزيل كل شكّ. انتظار قاعدة أدلة كاملة لا لبس فيها قرار بحدّ ذاته، عادة لمواصلة فعل ما تفعله بالفعل؛ ثبِّت موعدًا نهائيًا يحترم تكلفة التأخير بقدر تكلفة التصرّف بناءً على دليل ضعيف.
11. عامِل التوليف مُدخَلًا لعرض القيمة، لا بديلًا عنه. التدخّل الأفضل دعمًا ليس تلقائيًا الخيار الصحيح بمجرد وزن التكلفة والأثر التوزيعي والشرعية إلى جانبه (انظر الموضوع 2.1 — بطاقة أداء القيمة العامة وأطر النتائج).
12. وثِّق أي دليل نظرت فيه، ولماذا رجّحته كما فعلت. سجلّ مكتوب للدراسات المُراجَعة والمنطق خلف الحكم النهائي يحمي شرعية القرار وقدرة المراجع التالي على التعلّم منه معًا.

أسئلة للنقاش مع فريقك

متى غيّرنا آخر مرة قرارًا حيًّا لأن مراجعة منهجية أو تقييم "ما ينجح" ناقض ما كنا نخطط بالفعل لفعله؟ إذا كانت الإجابة الصادقة "أبدًا"، فذلك يستحق التوقّف عنده، لأنه يوحي بأن مراجعة الأدلة قد تعمل تمرين تأكيد بدلًا من فحص حقيقي. ناقش قرارًا حديثًا كانت فيه قاعدة الأدلة مختلطة وراجع ما إذا كانت شكّلت الاختيار فعلًا أو جُمِعت أساسًا لدعم استنتاج تم التوصل إليه سلفًا. فكِّر فيما يحتاج إلى تغيير في كيف تصل الأدلة إلى صانعي القرار، ومتى، لتكون ذات تأثير حقيقي بدلًا من ثقل رمزي.

هل نعامل في أي مكان "لا دليل على أثر" كما لو كانت "دليلًا على لا أثر"، أو العكس؟ راجِع محفظة برامجك الحالية وحدّد أي برنامج خفّضت أولويته بصمت لأن "الدليل غير موجود"، وتحقّق مما إذا كان ذلك يعني غير مُختبَر فعلًا أو مُفنَّد فعلًا. افعل الشيء نفسه في الاتجاه الآخر: أي برنامج تواصل تمويله لأن "لم يُظهِر أحد أنه لا يعمل"، بينما في الحقيقة لم ينظر أحد. ناقش ما سيلزم لتصحيح المثالين أو الثلاثة الأكثر عواقب، ومن يجب أن يملك ذلك التصحيح.

إذا احتاج قرار إلى دليل بحلول الجمعة، هل لدينا فعلًا عملية تقييم أدلة سريع، أم سنرتجل واحدة تحت الضغط؟ الضغط الزمني ليس افتراضيًا؛ إنه الحال العادية التي تُتَّخَذ تحتها معظم قرارات قائمة على الأدلة فعلية. ناقش ما إذا كان لدى منظمتك منهج دائم — فريق مُسمًّى، قالب، قائمة قصيرة بمراكز "ما ينجح" لتُفحَص أولًا — أو ما إذا كان كل طلب عاجل يبدأ من صفحة فارغة. إذا كان الأخير، ناقش كيف ستبدو عملية تقييم سريع بحدّها الأدنى القابل للتطبيق ومن سيملكها.

تراتبية أدلة من نستخدم فعلًا، وهل تناسب مخاطر هذا القرار وقابليته للعكس؟ تُطبِّق المجالات المختلفة معايير أدلتها بشكل مختلف، وتراتبية مُعايَرة لقرارات عالية المخاطر لا يمكن عكسها ليست دائمًا العتبة الصحيحة لتجربة رخيصة وقابلة للعكس ويسهل رصدها. ناقش ما إذا كانت منظمتك تطبّق معيار أدلة واحدًا موحَّدًا بغضّ النظر عن المخاطر، وهل يحميك ذلك من قرارات سيئة أو يبطئ فقط قرارات جيدة. اتفقوا، كفريق، على أي معيار يجب أن يُطلَب للقرارات الثلاثة القادمة في جدول أعمالكم، قبل أن تعرفوا ماذا تقول الأدلة.

ماذا فعلنا، بشكل ملموس، لمنع تقييماتنا الخاصة من الاختفاء في درج ملفات؟ كل نتيجة فارغة غير منشورة تجلس عليها منظمتك فجوة سيتعيّن على منظمة أخرى إعادة اكتشافها بالطريقة الصعبة. ناقش سجلّك بصدق: كم من تقييماتك العشرة الأخيرة شُوركت خارجيًا، وماذا حدث لتلك التي لم تُشارَك. اتفق على التزام ملموس ومُموَّل — سياسة نشر، سجلّ مشترك — بدلًا من طموح عام لتكون أكثر شفافية.

هل نستخدم عبارة "نحتاج إلى مزيد من الأدلة" بصدق، أم كطريقة لتجنّب قرار لا نريد اتخاذه؟ هذا أكثر سؤال مزعج في هذا الموضوع، ويستحق أن يُطرَح مباشرة. حدّد قرارًا محدَّدًا متوقّفًا حاليًا على أسس الأدلة وناقش، بصراحة، ما الذي سيغيّر رأيك فعلًا، وهل الدليل الذي تنتظره سيصل واقعيًا في الوقت المناسب. إن لم يكن كذلك، ناقش كيف سيبدو قرار صادق تحت عدم يقين حقيقي بدلًا من مواصلة الانتظار، ومن يملك سلطة اتخاذه.

في الممارسة: مثال على القيمة العامة

كانت وكالة توظيف إقليمية، جزء من وزارة حكومية وطنية مسؤولة عن برامج سوق العمل، تحت ضغط للقرار خلال دورة ميزانية واحدة ما إذا كانت ستُوسِّع تجربة تدريب وظيفي من ثلاث مناطق إلى الإقليم بأكمله. جمعت التجربة أماكن عمل مدعومة مع إرشاد منظَّم، ووجدت تجربة الوكالة العشوائية الخاصة عبر المناطق التجريبية الثلاث زيادة متواضعة لكن دالّة إحصائيًا في التوظيف المستدام بعد 12 شهرًا. عقَّد مصدر أدلة منافس الصورة: مراجعة منهجية نُشِرت العام السابق، جامعة تسعة برامج مماثلة عبر بلدان عدة، وجدت أثرًا متوسطًا شبه صفري، بتفاوت واسع بين الدراسات ولا نمط واضح يفسّر أي البرامج نجح.

كان لدى وحدة أدلة الوكالة ستة أسابيع قبل موعد تقديم الميزانية للتوفيق بين الاكتشافين. كانت غريزة محلل مبتدئ الأولى معاملة المراجعة المُجمَّعة أكثر موثوقية لمجرد أنها جمعت دراسات أكثر، والتوصية بإلغاء التجربة. اعترضت مستشارة الأدلة الرئيسية للوحدة: متوسط مُجمَّع شبه صفري عبر برامج مختلفة فعلًا لم يكن دليلًا قويًا على أن هذا البرنامج المحلي المحدَّد جيد التنفيذ سيفشل — كان دليلًا على أن برامج التدريب الوظيفي عمومًا متفاوتة في الجودة والملاءمة، وهو ما كان معروفًا بالفعل. كان عدم التجانس العالي المُبلَّغ عنه في المراجعة نفسه هو الاكتشاف الأهم من المتوسط المُجمَّع.

اقترحت المستشارة مسارًا وسطًا بدلًا من خيار ثنائي. أوصت بتوسّع مرحلي إلى نصف الإقليم، مع اختيار مناطق التوسّع عشوائيًا بحيث يُولِّد الطرح نفسه دليلًا إضافيًا بدلًا من مجرد الإنفاق على افتراض (انظر الموضوع 2.4 — الاقتصاد القياسي للقطاع العام وتقييم البرامج لكيفية تصميم طرح مرحلي تقييمًا إضافيًا). أوصت أيضًا بنشر التجربة الأصلية كاملة، مع المناهج والبيانات الخام، بحيث يمكن التقاطها في المراجعة المنهجية التالية بدلًا من الجلوس في تقرير داخلي لن يراه أبدًا أحد خارج الوكالة.

وافقت قيادة الوزارة على النهج المرحلي، مُصاغًا صراحة في دراسة الجدوى (انظر الموضوع 2.5 — دراسات الجدوى والقيمة مقابل المال) بوصفه قرارًا اتُّخِذ تحت دليل معتدل اليقين مع آلية مُدمَجة لحسم عدم اليقين خلال 18 شهرًا، لا قرارًا اتُّخِذ لأن الدليل كان حاسمًا. بعد 18 شهرًا، أظهرت مناطق التوسّع أثرًا قريبًا من أثر التجربة الأصلية، ووسّعت الوزارة أكثر بقاعدة أدلة أقوى مما قدّمه أي من المصدرين وحده — وسجلًّا واضحًا يُظهر لماذا اختارت التصرّف بدلًا من الانتظار.

هذا السيناريو توضيحي وخيالي؛ لا يصف برنامج أو تقييم أي وزارة حقيقية.

أربعة منظورات قطاعية

الحكومة المحلية

نادرًا ما تملك هيئة محلية الميزانية أو عبء الحالات لتكليف مراجعتها المنهجية الخاصة، فحرفتها العملية ترجمة أدلة توليف وطنية ودولية إلى سياق محلي محدَّد تحت ضغط زمني حقيقي — التحقق مما إذا كانت قاعدة أدلة تدخّل مُقيَّم في مجموعة أدوات تشبه سكانها ونظام خدمتها ومستوى تمويلها قبل افتراض أن الأثر المُقيَّم سينتقل. القادة المحليون أيضًا الأقرب إلى تكلفة كلا الخطأين اللذين يحذّر منهما هذا الموضوع: التصرّف بناءً على تدخّل أظهر توليف بالفعل أنه لا يعمل، ورفض ابتكار محلي واعد فعلًا لكن ناقص التقييم لأن لا مركز "ما ينجح" قيَّمه بعد.

الحكومة الوطنية

الحكومة الوطنية حيث تستقرّ معظم مراكز "ما ينجح" وإرشادات تراتبية الأدلة الرسمية، مانحة الوزارات الوطنية قربًا من بنية التوليف لكن أيضًا أكبر تعرّض لمعاملة تراتبية الأدلة بوابة بيروقراطية بدلًا من مساعدة قرار. المهمة الوطنية المميِّزة تكليف تلك البنية وصيانتها — تمويل بيت مقاصة، وتحديد معايير أدلته، وضمان وصول تقييماته فعلًا إلى موظفين يكتبون دراسات جدوى (انظر الموضوع 2.5 — دراسات الجدوى والقيمة مقابل المال)، بدلًا من الوجود موقعًا حسن السمعة نادرًا ما تستشيره فرق السياسة تحت ضغط الموعد النهائي.

القطاع الاجتماعي وغير الربحي

تفتقر المنظمات غير الربحية والجمعيات الخيرية عادة إلى موارد إجراء تقييمات صارمة على نطاق واسع، ما يجعلها معتمدة كثيرًا على هيئات توليف خارجية وبازدياد على جهات تمويل تطلب المواءمة مع درجة أدلة مُقيَّمة شرطًا للمنحة. يخلق هذا مخاطرة مميِّزة: يمكن أن تُغرَى منظمات تحت ضغط مالي بالمبالغة في مدى تطابق برنامجها مع تقييم مؤاتٍ — شكل من "غسل الأدلة" — أو، عكسيًا، يمكن أن تُستبعَد جمعيات خيرية محلية صغيرة لكن فعّالة فعلًا من التمويل لأنها لم تكن أبدًا كبيرة بما يكفي لتوليد الأدلة التي يقيّمها بيت مقاصة وطني عاليًا (انظر الموضوع 3.8 — إدارة القطاع الاجتماعي والمنظمات غير الربحية للهياكل التمويلية خلف هذا الضغط).

المتعدد الأطراف والدولي

تواجه الهيئات المتعددة الأطراف والدولية مشكلة قابلية التعميم في أحدّ صورها: تدخّل أُثبِت في نظام صحي أو قطاع زراعي أو سوق عمل في بلد واحد يُقتَرَح روتينيًا لسياق اقتصادي ومؤسسي مختلف جدًا، وأدبيات التوليف أفضل في الإشارة إلى هذا النقل غير المدعوم بعد وقوعه من قبله. شبكات بحث بُنيت لسدّ هذه الفجوة، كمختبر عبد اللطيف جميل لمكافحة الفقر، دفعت سياسة التنمية نحو التكرار الخاص بالسياق بدلًا من إثبات مفهوم لبلد واحد، لكن التوتر بين أدلة قابلة للمقارنة عالميًا وآثار معتمدة على السياق يبقى سمة مُعرِّفة للتوليف على هذا المستوى.

أنماط الفشل الشائعة

تراتبية الأدلة عذرًا للتقاعس. يستشهد فريق يواجه قرارًا صعبًا مثيرًا للجدل بـ"دليل غير كافٍ" أو "لا تجربة عشوائية بعد" سببًا للتأجيل إلى أجل غير مسمّى، بينما المحرِّك الصادق للتأخير إزعاج سياسي أو رغبة في تجنّب المساءلة. يكلّف هذا المنظمة الفرصة نفسها، ويكلّف قاعدة الأدلة اختبارًا واقعيًا كان يمكن أن يحسم عدم اليقين، تاركًا صانع القرار التالي يواجه الفجوة نفسها بالضبط.

الخلط بين غياب الدليل ودليل الغياب. يُقتَل ابتكار محلي واعد لكن غير مُختبَر كما لو جُرِّب وفشل، بينما يستمر تمويل برنامج وطني فنّده مرارًا لأن أحدًا لم يُصِغ الدليل اكتشافًا سلبيًا بدلًا من فجوة. كلا الخطأين مكلف: أحدهما يُغلِق خيارات واعدة، والآخر يحمي برامج كان توليف واضح النظر سيقاعدها منذ سنوات.

معاملة تقييم مجموعة أدوات التحليل بأكمله. يقرأ صانع قرار أيقونة قفل واحدة أو تقييم نجوم ويتوقّف هناك، دون التحقق مما إذا كانت الدراسات الأساسية تطابق سياقه أو سكانه أو حجمه. التقييمات مُختصَرة عمدًا لسهولة الوصول؛ مُستخدَمة دون المراجعة الأساسية، يمكن أن تُنتج قرارات واثقة مبنية على قاعدة أدلة أرقّ مما توحي به بساطة التقييم.

تجاهل عدم التجانس لصالح النتيجة المُجمَّعة الرئيسية. يُقتَبَس حجم أثر متوسط واحد لتحليل تلوي في موجز بينما يُسقَط التفاوت الواسع بين الدراسات التي أنتجته — الاكتشاف الأكثر إفادة غالبًا. هذا يُنتج دقة زائفة: يتصرّف صانع قرار كما لو أن كل تنفيذ يتصرّف بالطريقة نفسها، بينما تقوم جودة التنفيذ والسياق بعمل مماثل لعمل التدخّل نفسه.

ترك تحيّز النشر يشكّل قاعدة الأدلة بصمت. تقرأ منظمة فقط الأدبيات الأكاديمية المنشورة عند تقييم تدخّل، فتفوتها التجارب السلبية والتقييمات الداخلية غير المنشورة التي لم تصل أبدًا إلى مجلة. تنحرف صورة "ما ينجح" الناتجة منهجيًا نحو الإيجابية، وترث القرارات المبنية عليها ذلك الانحراف دون أن يختاره أحد عمدًا.

نموذج النضج

قائمة التحقق

• مراجعة منهجية أو تقييم "ما ينجح" مفحوص قبل الاعتماد على دراسة واحدة.
• مراجعة الأدلة الأساسية مقروءة، لا التقييم أو الأيقونة الملخَّصة فقط.
• جودة الدليل وقوة التوصية مذكورتان حكمين منفصلين.
• "لا دليل على أثر" مقابل "دليل على لا أثر" مميَّزان صراحة في الموجز المكتوب.
• تطابق السياق بين الدراسات المُراجَعة والقرار المطروح مفحوص (السكان، الحجم، نظام الخدمة).
• عملية تقييم أدلة سريع متاحة ومستخدَمة حين لن تناسب مراجعة كاملة الجدول الزمني.
• عتبة الأدلة للقرار مُتَّفَق عليها قبل مراجعة النتائج.
• خطة قائمة لنشر تقييم هذه المنظمة الخاص، مهما كانت النتيجة.
• علاقة دائمة مع مركز أو بيت مقاصة "ما ينجح" ذي صلة مُقامة، لا مبنية من الصفر تحت الضغط.
• المنطق خلف الحكم النهائي موثَّق، بما في ذلك الدليل المدروس والمرفوض.
• القرار مُراجَع مقابل عرض القيمة واعتبارات الشرعية، لا قوة الدليل وحدها.

المصادر الرئيسية

• دليل كوكرين للمراجعات المنهجية للتدخّلات، الذي تحفظه كوكرين — المنهجية التأسيسية التي تُبنى عليها ممارسة المراجعة المنهجية عبر القطاعات.
• إرشادات تعاونية كامبل حول المراجعات المنهجية وتوليف الأدلة للسياسة الاجتماعية والسلوكية والجنائية — الامتداد المباشر لتلك المنهجية إلى مجالات سياسة عامة أبعد من الصحة.
• دليل معايير بيت مقاصة ما ينجح (معهد علوم التعليم، الولايات المتحدة) — مثال عملي لكيفية وضع بيت مقاصة وطني معايير تصميم دراسة صريحة وتقييم الأدلة مقابلها.
• مجموعة أدوات التعليم والتعلّم لمؤسسة الوقف التعليمي — مثال عملي موجَّه للممارسين لترجمة الأدلة المُجمَّعة إلى تقييمات تكلفة وأثر وقوة أدلة قابلة للمقارنة.
• عمل منظمة التعاون الاقتصادي والتنمية حول بناء القدرة لصنع السياسة المسترشدة بالأدلة — سرد عبر البلدان لكيفية تنظيم الحكومات جانبي طلب الأدلة وعرضها.
• مركز ما ينجح لتقليل الجريمة التابع لكلية الشرطة، ومجموعة أدواته لتقليل الجريمة — مثال عملي إضافي لنمط بيت المقاصة مُطبَّق خارج الصحة والتعليم.

المراجع

1. Systematic review — Wikipedia — https://en.wikipedia.org/wiki/Systematic_review
2. Meta-analysis — Wikipedia — https://en.wikipedia.org/wiki/Meta-analysis
3. Evidence-based policy — Wikipedia — https://en.wikipedia.org/wiki/Evidence-based_policy
4. Cochrane (organisation) — Wikipedia — https://en.wikipedia.org/wiki/Cochrane_(organisation)
5. Campbell Collaboration — Wikipedia — https://en.wikipedia.org/wiki/Campbell_Collaboration
6. What Works Clearinghouse — Wikipedia — https://en.wikipedia.org/wiki/What_Works_Clearinghouse
7. Education Endowment Foundation — Wikipedia — https://en.wikipedia.org/wiki/Education_Endowment_Foundation
8. Publication bias — Wikipedia — https://en.wikipedia.org/wiki/Publication_bias
9. Randomized controlled trial — Wikipedia — https://en.wikipedia.org/wiki/Randomized_controlled_trial
10. Evidence of absence — Wikipedia — https://en.wikipedia.org/wiki/Evidence_of_absence
11. Hierarchy of evidence — Wikipedia — https://en.wikipedia.org/wiki/Hierarchy_of_evidence
12. GRADE approach — Wikipedia — https://en.wikipedia.org/wiki/GRADE_approach
13. Cochrane Handbook for Systematic Reviews of Interventions — Cochrane — https://www.cochrane.org/authors/handbooks-and-manuals/handbook/current
14. Campbell Collaboration — Campbell Collaboration — https://www.campbellcollaboration.org/
15. What Works Clearinghouse Standards Handbook — Institute of Education Sciences, U.S. Department of Education — https://ies.ed.gov/ncee/wwc/Handbooks
16. Teaching and Learning Toolkit — Education Endowment Foundation — https://educationendowmentfoundation.org.uk/education-evidence/teaching-learning-toolkit
17. Building Capacity for Evidence-Informed Policy-Making — OECD — https://www.oecd.org/en/publications/building-capacity-for-evidence-informed-policy-making_86331250-en.html
18. What Works Centre for Crime Reduction — College of Policing — https://www.college.police.uk/research/what-works-centre-crime-reduction