شواہد کی ترکیب اور کیا کارآمد ہے

عوامی قدر میں یہ کیوں اہم ہے

کسی وزیر، میئر یا خیراتی ادارے کے پروگرام ڈائریکٹر کو شاذ و نادر ہی ایک واحد، صاف مطالعے پر عمل کی آسائش ہوتی ہے۔ زیادہ تر میز پر تین جائزے ہوتے ہیں جو ایک دوسرے سے اختلاف کرتے ہیں، ایک ادب کا جائزہ جو انہیں منتخب طور پر حوالہ دیتا ہے، ایک دباؤ ڈالنے والا گروہ جو وہ ایک ٹرائل لہرا رہا ہے جو اس کے مقدمے کے مطابق ہو، اور تحقیق کی رفتار کے بجائے بجٹ چکر کی طے کردہ مہلت۔ شواہد کی ترکیب اس لیے موجود ہے کہ انفرادی مطالعے شور والے ہوتے ہیں: نمونے چھوٹے ہیں، سیاق مختلف ہیں، اور کوئی بھی نتیجہ اتفاق، مقامی موزونیت جو سفر نہیں کرے گی، یا حقیقی اثر ہو سکتا ہے۔ قائد کو جس سوال کا جواب درکار ہے وہ شاذ و نادر «اس ایک مطالعے نے کیا پایا؟» ہے بلکہ «جو کچھ بھی معتبر طور پر آزمایا گیا اس سب میں سے، اگر میں یہ یہاں، ابھی کروں تو مجھے کیا توقع رکھنی چاہیے؟»

عوامی قدر کا نظریہ اسے تکنیکی نزاکت سے زیادہ بناتا ہے۔ اجتماعی وسائل سے فنڈ کیا گیا پروگرام قدر کی ایسی تجویز پر قائم ہے جس کی شہری، مجموعی طور پر، اجازت دیں گے (دیکھیں موضوع 2.1 — عوامی قدر کا اسکور کارڈ اور نتائج کے فریم ورک کہ وہ تجویز کیسے بیان اور ٹریک کی جاتی ہے)۔ ایک واحد چنے ہوئے مطالعے، یا شواہد کے بالکل جائزے کے بغیر بنائی گئی تجویز محتاط ترکیب پر بنائی گئی تجویز سے جواز پر کمزور دعویٰ ہے — اور عملی صلاحیت کی کمزور بنیاد بھی، کیونکہ عملہ اور بجٹ اسی کی بنیاد پر مختص ہوتے ہیں۔ «کیا کارآمد ہے» کی تحریک — آزاد اداروں کا وہ نیٹ ورک جو پالیسی کے شواہد کے معیار اور مضبوطی کو درجہ دیتا ہے — براہِ راست اسی مسئلے سے پیدا ہوئی: بہت سے عوامی فیصلے بہترین تائید یافتہ مطالعے کے بجائے سب سے بلند آواز مطالعے پر کیے جا رہے تھے۔

مشکل مسئلہ جس کا یہ موضوع حل پیش کرتا ہے وہ ہے جب ترکیب خود غیر نتیجہ خیز، متنازع، یا بروقت دستیاب ہی نہ ہو تو قائد کیا کرے۔ شواہد کی درجہ بندیاں ایک بے ترتیب شواہد کی بنیاد میں نظم لانے کے لیے بنائی گئی تھیں، مگر لاپروائی سے استعمال کرنے پر «شواہد ابھی کافی مضبوط نہیں» اس فیصلے سے بچنے کا مستقل بہانہ بن جاتا ہے جس کا حقیقت انتظار نہیں کرے گی۔ جو قائد سمجھتا ہے کہ ترکیب کیسے کام کرتی ہے، اور اس کی حدیں کہاں ہیں، وہ احتیاط کا تقاضا کرنے والی حقیقی غیر یقینی کو اس درجہ بندی سے الگ پہچان سکتا ہے جو بے عملی کی آڑ بنی ہو۔

یہ موضوع ان سببی استنباط کے طریقوں کا فطری تتمہ ہے جن پر ترکیب انحصار کرتی ہے (دیکھیں موضوع 2.4 — سرکاری شعبے کی اقتصادی پیمائش اور پروگرام کا جائزہ) اور ان نتائج کے فریم ورک کے ساتھ بیٹھتا ہے، ان کی جگہ نہیں لیتا، جن کی ترکیب آخرکار خدمت کرتی ہے (دیکھیں موضوع 2.1 — عوامی قدر کا اسکور کارڈ اور نتائج کے فریم ورک)۔ جو قائد منظم جائزہ پڑھ سکتا ہے، «کیا کارآمد ہے» کی درجہ بندی سمجھتا ہے، اور غیر موجود بمقابلہ منفی شواہد پر صاف سوچ سکتا ہے وہ اس سے بہتر زندہ فیصلے کرتا ہے جو صرف «مزید شواہد» کا مطالبہ کر سکے یا اسے دیا گیا پہلا مطالعہ قبول کر لے۔

بنیادی تصورات

منظم جائزہ (systematic review) کسی متعین سوال پر شواہد کی ترکیب ہے جو مطالعات کو ڈھونڈنے، پرکھنے اور ملانے کے لیے صریح، پیشگی متعین، قابلِ دہرانے والا طریقہ استعمال کرتی ہے، بیانیہ ادب کے جائزے کے برعکس، جو مصنف کی صوابدید پر ماخذ منتخب کرتا ہے (دیکھیں منظم جائزہ)۔ اس کی متعین خصوصیات تلاش شروع ہونے سے پہلے لکھا گیا رجسٹرڈ پروٹوکول، ایسی تلاش کی حکمتِ عملی جس میں غیر شائع شدہ اور سرمئی ادب شامل ہو، صریح شمولیت کے معیارات، اور ہر مطالعے کے تعصب کے خطرے کو پرکھنے کا معیاری طریقہ ہیں۔ یہی منظم جائزے کو حاشیوں والے اچھے لکھے مضمون سے الگ کرتا ہے: وہی پروٹوکول اپنانے والی دوسری ٹیم بڑی حد تک وہی شواہد پائے گی اور بڑی حد تک ملتے جلتے نتیجے پر پہنچے گی۔

میٹا تجزیہ (meta-analysis) وہ شماریاتی تکنیک ہے جو اکثر منظم جائزے کے ساتھ جوڑی جاتی ہے: یہ کئی آزاد مطالعات کے مقداری اثر کے حجموں کو ایک واحد، زیادہ درست تخمینے میں جمع کرتی ہے، عموماً ہر مطالعے کو اس کے نمونے کے حجم اور معیار سے وزن دے کر (دیکھیں میٹا تجزیہ)۔ میٹا تجزیہ اتنا ہی اچھا ہے جتنے مطالعے اسے خوراک دیتے ہیں؛ پانچ کمزور مطالعات کو جمع کرنا ممکنہ طور پر متعصب اثر کا زیادہ درست تخمینہ پیدا کرتا ہے، قابلِ بھروسا نہیں۔ لہٰذا تجزیہ کار غیر ہم آہنگی (heterogeneity) رپورٹ کرتے ہیں — مطالعات کے نتائج اتفاق کی پیش گوئی سے کتنا زیادہ مختلف ہیں — کیونکہ زیادہ غیر ہم آہنگی اشارہ دیتی ہے کہ مطالعات دراصل ایک ہی چیز نہیں جانچ رہے تھے، اور ایک واحد جمع شدہ عدد گمراہ کر سکتا ہے۔

اشاعت کا تعصب (publication bias) اس رجحان کا نام ہے کہ مثبت، معنی خیز نتائج والے مطالعے شائع ہوتے ہیں جبکہ غیر نتیجہ خیز یا منفی نتائج محقق کی فائل دراز میں رہتے ہیں، جس سے مداخلت ادب میں اصل سے زیادہ مستقل طور پر مؤثر نظر آتی ہے (دیکھیں اشاعت کا تعصب)۔ سخت جائزہ اس کی تصحیح صرف جریدوں کے مضامین کے بجائے ٹرائل رجسٹریاں اور غیر شائع شدہ جائزے تلاش کر کے کرتا ہے۔ جو قائد صرف شائع شدہ مقالوں پر بنی ترکیب پڑھتا ہے اسے پوچھنا چاہیے کہ جائزہ کاروں نے ان مطالعات کو ڈھونڈنے کے لیے کیا کیا جو کبھی چھپے ہی نہیں۔

شواہد کی درجہ بندی (hierarchy of evidence) مطالعے کے ڈیزائنوں کو اس لحاظ سے رینک کرتی ہے کہ وہ ملانے والے عنصر اور تعصب کو کتنی اچھی طرح قابو کرتے ہیں، عموماً بے ترتیب ٹرائلز کے میٹا تجزیے کو سب سے اوپر رکھتے ہوئے، پھر انفرادی بے ترتیب کنٹرولڈ ٹرائلز، پھر نیم تجرباتی اور مشاہداتی ڈیزائن، اور ماہرانہ رائے کو سب سے نیچے (دیکھیں شواہد کی درجہ بندی)۔ بے ترتیب کنٹرولڈ ٹرائل شرکاء کو اتفاق سے مداخلت یا موازنہ گروہ میں مختص کرتا ہے، جو سببی اثر کو اپنے ارد گرد کی ہر چیز سے الگ کرنے کا واحد سب سے طاقتور اوزار ہے (دیکھیں بے ترتیب کنٹرولڈ ٹرائل؛ ایسے ڈیزائن کیسے بنتے اور تجزیہ ہوتے ہیں اس کے لیے دیکھیں موضوع 2.4 — سرکاری شعبے کی اقتصادی پیمائش اور پروگرام کا جائزہ)۔ درجہ بندی حقیقتاً مفید اندازہ ہے، مگر اندازہ، قانون نہیں: کسی نادر یا آہستہ حرکت والی پالیسی کا اچھی طرح کیا گیا مشاہداتی مطالعہ بری طرح کیے گئے، کم طاقت والے ٹرائل سے بلند ہو سکتا ہے، اور جو قائد اسے مطلق درجہ بندی سمجھتا ہے وہ کبھی زیادہ باوقار ڈیزائن کی خاطر زیادہ متعلقہ شواہد رد کر دے گا۔

GRADE طریقہ — سفارشات، تشخیص، ترقی اور جائزوں کی درجہ بندی — دوسرے، الگ فیصلے کو باضابطہ بناتا ہے جو اکیلی درجہ بندی نہیں کرتی: یہ شواہد کی یقینیت اور، آزادانہ طور پر، اس پر عمل کی سفارش کی مضبوطی دونوں کو درجہ دیتا ہے، کیونکہ مضبوط شواہد ہمیشہ مضبوط سفارش کو جائز نہیں ٹھہراتے، اور کمزور شواہد شدید، فوری نقصان کے خلاف بے عملی کو ہمیشہ جائز نہیں ٹھہراتے (دیکھیں GRADE طریقہ)۔ یہ علیحدگی وقت کے دباؤ والے فیصلہ ساز کے لیے اس موضوع کا واحد سب سے مفید خیال ہے: یہ قائد کو ایمانداری سے کہنے دیتا ہے، «یہاں شواہد درمیانے ہیں، اور داؤ اور انتظار کی لاگت کو دیکھتے ہوئے، میں سفارش کرتا ہوں کہ ہم آگے بڑھیں» — ایک قابلِ دفاع، دستاویزی فیصلہ، یقینیت کے انتظار اور شواہد کو مکمل نظرانداز کرنے کے جھوٹے انتخاب کے بجائے۔

زندہ پالیسی بحث میں مسلسل بار بار آنے والا فرق شواہد کی غیر موجودگی اور غیر موجودگی کے شواہد کے درمیان ہے: کسی مداخلت کے اثر پر مطالعات کا فقدان («اثر کا کوئی ثبوت نہیں») اس دعوے کے برابر نہیں کہ اچھی طاقت والے مطالعات کے مجموعے نے مثبت طور پر کوئی اثر نہیں پایا («اثر نہ ہونے کا ثبوت») (دیکھیں غیر موجودگی کے شواہد)۔ ایسا نیا مقامی پروگرام جس کا ابھی کوئی جائزہ نہیں، محض آزمایا نہیں گیا؛ اچھی طرح مطالعہ شدہ قومی پروگرام جو بار بار کوئی نتیجہ نہ ہلاتا پایا گیا آزمایا گیا اور کارگر نہ ثابت ہوا۔ دونوں کو گڈمڈ کرنا عوامی قائد کی سب سے نتیجہ خیز غلطیوں میں سے ہے: غیر آزمائے مگر امید افزا تجرباتی منصوبے کو یوں ختم کرنا گویا وہ ناکام ہو چکا ہو، یا بار بار غلط ثابت پروگرام کو یوں فنڈ کرتے رہنا گویا کسی نے ابھی غور سے دیکھا ہی نہیں۔

شواہد پر مبنی پالیسی وسیع تر تحریک اور معیاری دعویٰ ہے کہ عوامی فیصلے محض نظریے، حکایت یا جبلت کے بجائے سختی سے قائم شدہ شواہد پر مبنی ہونے چاہییں (دیکھیں شواہد پر مبنی پالیسی)۔ اس کے نقاد، اور بڑھتی ہوئی تعداد میں اس کے اپنے حامی، «شواہد سے آگاہ پالیسی» کو ترجیح دیتے ہیں، جو مانتی ہے کہ شواہد کئی ان پٹس میں سے ایک ہیں — اقدار، مینڈیٹ، لاگت، اور جواز کے سوالات جنہیں یہ کتاب بنیادی سمجھتی ہے — نہ کہ ایسا میکانکی فیصلہ قاعدہ جو شواہد اکیلے طے کر سکیں۔

اس تحریک سے کیا کارآمد ہے کا مرکز یا کلیئرنگ ہاؤس کا نمونہ پروان چڑھا: آزاد ادارہ جو منظم طور پر پالیسی کے دائرے میں مداخلتوں کے شواہد کا جائزہ لیتا اور قابلِ رسائی، موازنہ پذیر درجہ بندیاں شائع کرتا ہے، بجائے اس کے کہ ہر مقامی کمیشن دینے والا اپنا جائزہ چلائے۔ کوکرین (Cochrane) نے 1993 سے صحت کی دیکھ بھال میں یہ نمونہ شروع کیا، منظم جائزے کے طریقے کی زندہ ہینڈ بک برقرار رکھتے ہوئے جو طب سے کہیں آگے استعمال ہوتی ہے (دیکھیں کوکرین (تنظیم))۔ کیمبل کولیبریشن نے وہی طریقہ سماجی پالیسی، فوجداری انصاف، تعلیم اور بین الاقوامی ترقی تک بڑھایا (دیکھیں کیمبل کولیبریشن)۔ قومی کلیئرنگ ہاؤس پیچھے آئے: امریکہ کا وہاٹ ورکس کلیئرنگ ہاؤس، جسے اس کا انسٹی ٹیوٹ آف ایجوکیشن سائنسز 2002 سے چلاتا ہے، تعلیمی تحقیق کا صریح ڈیزائن کے معیاروں کے مقابل جائزہ لیتا ہے (دیکھیں وہاٹ ورکس کلیئرنگ ہاؤس)؛ انگلینڈ کی ایجوکیشن اینڈومنٹ فاؤنڈیشن وسیع پیمانے پر استعمال ہونے والا تدریس اور تعلم کا ٹول کٹ شائع کرتی ہے جو کلاس روم کی مداخلتوں کو لاگت، شواہد کی مضبوطی اور عام اثر پر ایک موازنہ پذیر فارمیٹ میں درجہ دیتا ہے (دیکھیں ایجوکیشن اینڈومنٹ فاؤنڈیشن)۔ جرم میں کمی، ابتدائی مداخلت، بے گھری اور صحت مند بڑھاپے کے مساوی مراکز موجود ہیں — ایک ہی طریقے پر بنا چھوٹا بین الاقوامی خاندان: منظم جائزہ، شفاف درجہ بندی، اور عملی ماہرین کے لیے خلاصہ جسے پڑھنے کے لیے طریقہ جاتی ماہر کی ضرورت نہیں۔

بہترین طریقے

1. واحد مطالعے سے پہلے ترکیب مانگیں۔ جب کوئی نمایاں نتیجہ آپ کی میز پر آئے تو پہلے پوچھیں کہ آیا اس مداخلت کے لیے منظم جائزہ یا «کیا کارآمد ہے» کی درجہ بندی پہلے سے موجود ہے، یہ نہیں کہ مطالعہ الگ سے قائل کن لگتا ہے یا نہیں۔
2. کسی بھی ٹول کٹ کی درجہ بندی کے ساتھ بنیادی جائزہ بھی پڑھیں، اس کی جگہ نہیں۔ ایک سطر کی درجہ بندی یا تالے کا آئیکن فیصلے کا خلاصہ کرتا ہے؛ یہ سمجھنے کا متبادل نہیں کہ وہ کن شواہد پر قائم ہے اور آپ کے سیاق پر کتنی براہِ راست لاگو ہوتا ہے۔
3. شواہد کے معیار کو اپنی سفارش کی مضبوطی سے صراحت سے الگ کریں۔ GRADE کی منطق غیر رسمی طور پر بھی مستعار لیں: بتائیں کہ شواہد کتنے یقینی ہیں، پھر الگ سے بتائیں کہ وہ یقینیت، داؤ اور لاگت کے ساتھ مل کر، اب عمل کو کتنی مضبوطی سے جائز ٹھہراتی ہے۔
4. فیصلے سے پہلے نام لیں کہ آپ کو «ابھی کوئی شواہد نہیں» کا سامنا ہے یا «اثر نہ ہونے کے شواہد» کا۔ ہر شواہد کی مختصر دستاویز میں یہ فرق تحریر میں رکھیں، کیونکہ دونوں صورتیں تقریباً الٹے ردعمل کی متقاضی ہیں — محتاط تجرباتی منصوبہ بمقابلہ روکنا یا ازسرِنو ڈیزائن۔
5. یہ فرض کرنے سے پہلے کہ اثر منتقل ہوگا، جائزے کے سیاق اور اپنے سیاق کا ملاپ جانچیں۔ کہیں اور چلائے گئے مطالعات سے جمع شدہ اثر کا حجم اوسط ہے، وعدہ نہیں؛ پوچھیں کہ اصل میں اثر کو کس نے بدلا اور کیا وہ بدلنے والے عوامل یہاں موجود ہیں۔
6. جب مکمل منظم جائزہ آپ کی مدت میں نہ سمائے تو تیز شواہد کا جائزہ کمیشن کریں۔ موجودہ ادب کا منظم، وقت کی حد والا جائزہ — دنوں یا ہفتوں میں، مہینوں میں نہیں — نئی بنیادی تحقیق اور بالکل جائزہ نہ ہونے کے درمیان جائز درمیانی راستہ ہے۔
7. نتیجہ جو بھی ہو، اپنے جائزے خود شائع کریں۔ غیر نتیجہ خیز اور منفی نتائج اگلی ترکیب کے لیے مثبت نتائج جتنے ہی قیمتی ہیں؛ انہیں روکنا اشاعت کے اس تعصب کو بدتر کرتا ہے جو آپ کے شعبے کے ہر مستقبل کے جائزے کو کمزور کرتا ہے۔
8. ضرورت پڑنے سے پہلے اپنے شعبے کے «کیا کارآمد ہے» مرکز یا کلیئرنگ ہاؤس سے مستقل تعلق بنائیں۔ زندہ بحران کے دوران پہلی بار کسی ترکیب ادارے کے ٹول کٹ کو ٹھنڈے طور پر کھنگالنا اس سے کہیں زیادہ سست ہے کہ آپ پہلے ہی جانتے ہوں کہ وہ کیا احاطہ کرتا ہے اور کسی خلا کے بارے میں کس سے پوچھیں۔
9. نتائج آنے سے پہلے، بعد میں نہیں، اپنی شواہد کی حد طے کریں۔ پہلے سے اتفاق کریں کہ شواہد کی کون سی سطح توسیع، مزید تجربے، یا روکنے کو جائز ٹھہرائے گی، تاکہ پہلے سے طے شدہ فیصلے کے مطابق مبہم نتائج کی دوبارہ تشریح کی ترغیب کم ہو۔
10. ایسے مطالعے کی تلاش کو وقت کی حد دیں جو ہر شک دور کر دے۔ مکمل، غیر مبہم شواہد کی بنیاد کا انتظار خود ایک فیصلہ ہے، عموماً جو آپ پہلے سے کر رہے ہیں وہی کرتے رہنے کا؛ ایسی مہلت طے کریں جو تاخیر کی لاگت کا بھی اتنا ہی احترام کرے جتنا کمزور شواہد پر عمل کی لاگت کا۔
11. ترکیب کو قدر کی تجویز کی ان پٹ سمجھیں، اس کا متبادل نہیں۔ بہترین تائید یافتہ مداخلت خود بخود درست انتخاب نہیں جب لاگت، تقسیمی اثر اور جواز کو اس کے ساتھ تولا جائے (دیکھیں موضوع 2.1 — عوامی قدر کا اسکور کارڈ اور نتائج کے فریم ورک)۔
12. دستاویز کریں کہ آپ نے کون سے شواہد پر غور کیا، اور انہیں اس طرح وزن کیوں دیا۔ جائزہ کیے گئے مطالعات اور حتمی فیصلے کے پیچھے استدلال کا تحریری ریکارڈ فیصلے کے جواز اور اگلے جائزہ کار کی اس سے سیکھنے کی صلاحیت دونوں کی حفاظت کرتا ہے۔

اپنی ٹیم کے ساتھ بحث کے لیے سوالات

ہم نے آخری بار کب کوئی زندہ فیصلہ اس لیے بدلا کہ منظم جائزے یا «کیا کارآمد ہے» کی درجہ بندی نے اس کے برعکس بتایا جو ہم پہلے سے کرنے کا منصوبہ بنا چکے تھے؟ اگر ایماندارانہ جواب «کبھی نہیں» ہے تو اس کے ساتھ بیٹھنا قابلِ قدر ہے، کیونکہ یہ اشارہ دیتا ہے کہ شواہد کا جائزہ حقیقی جانچ کے بجائے تصدیقی مشق کے طور پر کام کر رہا ہو سکتا ہے۔ حالیہ فیصلے پر بحث کریں جہاں شواہد کی بنیاد ملی جلی تھی اور سمجھیں کہ آیا اس نے دراصل انتخاب کو شکل دی یا زیادہ تر پہلے سے طے شدہ نتیجے کی حمایت کے لیے جمع کی گئی۔ غور کریں کہ شواہد کے فیصلہ سازوں تک پہنچنے کے طریقے اور وقت میں کیا بدلنا پڑے گا تاکہ اس کا حقیقی اثر ہو، علامتی وزن نہیں۔

کیا ہم کہیں «اثر کا کوئی ثبوت نہیں» کو یوں سمجھ رہے ہیں گویا وہ «اثر نہ ہونے کا ثبوت» ہو، یا الٹ؟ اپنے موجودہ پروگرام کے مجموعے سے گزریں اور کسی بھی ایسے پروگرام کی شناخت کریں جسے آپ نے اس لیے خاموشی سے کم ترجیح دی ہو کہ «شواہد موجود نہیں»، اور جانچیں کہ اس کا مطلب حقیقتاً آزمایا نہیں گیا ہے یا حقیقتاً غلط ثابت ہو چکا ہے۔ دوسری سمت میں بھی کریں: کوئی بھی پروگرام جسے آپ اس لیے فنڈ کرتے رہتے ہیں کہ «کسی نے نہیں دکھایا کہ یہ کام نہیں کرتا»، جبکہ درحقیقت کسی نے دیکھا ہی نہیں۔ بحث کریں کہ سب سے زیادہ نتیجہ خیز دو یا تین مثالیں درست کرنے کے لیے کیا لگے گا، اور اس درستی کا مالک کون ہو۔

اگر جمعے تک کسی فیصلے کے لیے شواہد چاہیے ہوں تو کیا ہمارے پاس واقعی تیز شواہد کے جائزے کا عمل ہے، یا ہم دباؤ میں کوئی نیا بنا لیں گے؟ وقت کا دباؤ فرضی نہیں؛ یہ وہ معمول کی حالت ہے جس کے تحت زیادہ تر حقیقی شواہد پر مبنی فیصلے کیے جاتے ہیں۔ بحث کریں کہ آیا آپ کے ادارے کے پاس مستقل طریقہ ہے — نام زد ٹیم، سانچہ، پہلے جانچنے کے لیے «کیا کارآمد ہے» مراکز کی مختصر فہرست — یا ہر فوری درخواست خالی صفحے سے شروع ہوتی ہے۔ اگر بعد والی بات ہے تو بحث کریں کہ کم از کم قابلِ عمل تیز جائزے کا عمل کیسا ہوگا اور اس کا مالک کون ہوگا۔

ہم دراصل کس کی شواہد کی درجہ بندی استعمال کر رہے ہیں، اور کیا وہ اس فیصلے کے داؤ اور الٹنے کی صلاحیت سے میل کھاتی ہے؟ مختلف دائرے اپنے شواہد کے معیار مختلف طریقے سے لاگو کرتے ہیں، اور ناقابلِ واپسی، بلند داؤ والے فیصلوں کے لیے ناپی گئی درجہ بندی ہمیشہ سستے، الٹنے کے قابل، آسانی سے نگرانی ہونے والے تجرباتی منصوبے کے لیے درست حد نہیں ہوتی۔ بحث کریں کہ آیا آپ کا ادارہ داؤ سے قطع نظر ایک ہی شواہد کا معیار یکساں لاگو کرتا ہے، اور کیا یہ آپ کو برے فیصلوں سے بچاتا ہے یا محض اچھے فیصلوں کو سست کرتا ہے۔ بطور ٹیم اتفاق کریں کہ آپ کے ایجنڈے کے اگلے تین فیصلوں کے لیے کون سا معیار درکار ہونا چاہیے، یہ جاننے سے پہلے کہ شواہد کیا کہتے ہیں۔

ہم نے ٹھوس طور پر کیا کیا ہے کہ ہمارے اپنے جائزے فائل دراز میں غائب نہ ہوں؟ آپ کے ادارے کا بیٹھا ہوا ہر غیر شائع شدہ غیر نتیجہ خیز نتیجہ ایسا خلا ہے جسے کوئی اور ادارہ مشکل طریقے سے دوبارہ دریافت کرے گا۔ اپنے ریکارڈ پر ایمانداری سے بحث کریں: آپ کے آخری 10 جائزوں میں سے کتنے بیرونی طور پر شیئر ہوئے، اور جو نہیں ہوئے ان کا کیا ہوا۔ زیادہ شفاف ہونے کی عمومی خواہش کے بجائے ٹھوس، وسائل یافتہ عہد پر اتفاق کریں — اشاعت کی پالیسی، مشترکہ رجسٹری۔

کیا ہم «ہمیں مزید شواہد چاہییں» کا جملہ ایمانداری سے استعمال کر رہے ہیں، یا ایسے فیصلے سے بچنے کے طریقے کے طور پر جو ہم نہیں کرنا چاہتے؟ یہ اس موضوع کا سب سے ناخوشگوار سوال ہے، اور اسے براہِ راست پوچھے جانے کا مستحق ہے۔ شواہد کی بنیاد پر رکے ہوئے مخصوص فیصلے کی شناخت کریں اور صاف گوئی سے بحث کریں کہ آپ کا ذہن دراصل کیا بدلے گا، اور کیا جن شواہد کا آپ انتظار کر رہے ہیں وہ حقیقت پسندانہ طور پر وقت پر پہنچیں گے۔ اگر نہیں تو بحث کریں کہ مسلسل انتظار کے بجائے حقیقی غیر یقینی کے تحت ایماندارانہ فیصلہ کیسا ہوگا، اور اسے کرنے کا اختیار کس کے پاس ہے۔

عملی صورت: عوامی قدر کی ایک مثال

ایک علاقائی روزگار ایجنسی، جو قومی حکومت کے محکمے کا حصہ ہے اور جو لیبر منڈی کے پروگراموں کی ذمہ دار ہے، پر دباؤ تھا کہ ایک بجٹ چکر کے اندر فیصلہ کرے کہ آیا ملازمت کی تربیت کا تجرباتی منصوبہ تین اضلاع سے پورے علاقے تک بڑھایا جائے۔ تجرباتی منصوبے میں سبسڈی والی ملازمت کی تعیناتیاں اور منظم رہنمائی ملائی گئی تھی، اور ایجنسی کے اپنے تین تجرباتی اضلاع میں بے ترتیب ٹرائل نے 12 ماہ پر پائیدار روزگار میں معمولی مگر شماریاتی طور پر معنی خیز اضافہ پایا۔ ایک حریف شواہد کے ذریعے نے تصویر پیچیدہ کر دی: پچھلے سال شائع ہونے والے ایک منظم جائزے نے، کئی ملکوں کے نو ملتے جلتے پروگراموں کو جمع کرتے ہوئے، تقریباً صفر اوسط اثر پایا، مطالعات کے درمیان وسیع تغیر کے ساتھ اور کسی واضح نمونے کے بغیر کہ کون سے پروگرام کارگر رہے۔

ایجنسی کی شواہد کی اکائی کے پاس دونوں نتائج میں مفاہمت کے لیے بجٹ جمع کرانے کی مہلت سے چھ ہفتے تھے۔ ایک جونیئر تجزیہ کار کی پہلی جبلت جمع شدہ جائزے کو محض اس لیے زیادہ مستند سمجھنا تھا کہ اس نے زیادہ مطالعات ملائے، اور تجرباتی منصوبہ ختم کرنے کی سفارش کرنا۔ اکائی کی سربراہ شواہد کی مشیر نے مخالفت کی: حقیقتاً مختلف پروگراموں میں تقریباً صفر جمع شدہ اوسط اس بات کا مضبوط ثبوت نہیں تھا کہ یہ مخصوص، اچھی طرح نافذ کردہ مقامی پروگرام ناکام ہوگا — یہ اس کا ثبوت تھا کہ ملازمت کی تربیت کے پروگرام عمومی طور پر معیار اور موزونیت میں غیر ہم آہنگ ہیں، جو پہلے سے معلوم تھا۔ جائزے میں رپورٹ کی گئی زیادہ غیر ہم آہنگی خود جمع شدہ اوسط سے زیادہ اہم نتیجہ تھی۔

مشیر نے دو ٹوک انتخاب کے بجائے درمیانی راستہ تجویز کیا۔ اس نے آدھے علاقے تک مرحلہ وار توسیع کی سفارش کی، توسیعی اضلاع بے ترتیب طور پر منتخب کر کے تاکہ آغاز خود مزید شواہد پیدا کرے، نہ کہ محض ایک مفروضے کے مقابل خرچ ہو (دیکھیں موضوع 2.4 — سرکاری شعبے کی اقتصادی پیمائش اور پروگرام کا جائزہ کہ مرحلہ وار آغاز کو مزید جائزے کے طور پر کیسے ڈیزائن کیا جا سکتا ہے)۔ اس نے اصل ٹرائل کو طریقوں اور خام ڈیٹا سمیت مکمل شائع کرنے کی بھی سفارش کی، تاکہ اسے اگلے منظم جائزے میں اٹھایا جا سکے بجائے اس کے کہ وہ اندرونی رپورٹ میں پڑا رہے جسے ایجنسی سے باہر کوئی نہ دیکھے۔

محکمے کی قیادت نے مرحلہ وار طریقہ منظور کیا، جسے کاروباری مقدمے میں صراحت سے بیان کیا گیا (دیکھیں موضوع 2.5 — کاروباری مقدمات اور قدر برائے رقم) درمیانی یقینیت والے شواہد کے تحت کیے گئے فیصلے کے طور پر، 18 ماہ کے اندر غیر یقینی حل کرنے کے اندرونی طریقے کے ساتھ، نہ کہ اس لیے کیے گئے فیصلے کے طور پر کہ شواہد حتمی تھے۔ 18 ماہ بعد، توسیعی اضلاع نے اصل تجرباتی منصوبے کے قریب اثر دکھایا، اور محکمے نے دونوں ذرائع کے اکیلے پیش کردہ سے مضبوط شواہد کی بنیاد کے ساتھ مزید توسیع کی — اور اس واضح کاغذی ریکارڈ کے ساتھ کہ اس نے انتظار کرنے کے بجائے عمل کرنے کا فیصلہ کیوں کیا۔

یہ منظرنامہ مثال کے لیے اور فرضی ہے؛ یہ کسی حقیقی محکمے کے پروگرام یا جائزے کو بیان نہیں کرتا۔

چار شعبہ جاتی زاویے

مقامی حکومت

مقامی اتھارٹی کے پاس شاذ و نادر اپنا منظم جائزہ کمیشن کرنے کا بجٹ یا کیس لوڈ ہوتا ہے، لہٰذا اس کا عملی ہنر قومی اور بین الاقوامی ترکیب کے شواہد کو حقیقی وقت کے دباؤ میں مخصوص مقامی سیاق میں ترجمہ کرنا ہے — یہ جانچنا کہ ٹول کٹ میں درجہ بند مداخلت کی شواہد کی بنیاد اس کی اپنی آبادی، خدمتی نظام اور فنڈنگ کی سطح سے ملتی ہے یا نہیں، یہ فرض کرنے سے پہلے کہ درجہ بند اثر منتقل ہوگا۔ مقامی قائدین اس موضوع کی تنبیہ کردہ دونوں غلطیوں کی لاگت کے سب سے قریب ہیں: ایسی مداخلت پر عمل جسے ترکیب پہلے ہی کارگر نہ ثابت کر چکی ہو، اور حقیقی طور پر امید افزا مگر کم جائزہ شدہ مقامی جدت سے انکار کیونکہ کسی «کیا کارآمد ہے» مرکز نے اسے ابھی درجہ نہیں دیا۔

قومی حکومت

قومی حکومت وہ جگہ ہے جہاں زیادہ تر «کیا کارآمد ہے» کے مراکز اور شواہد کی رسمی درجہ بندی کی رہنمائی ہے، جو قومی محکموں کو ترکیب کے بنیادی ڈھانچے سے قربت دیتی ہے مگر شواہد کی درجہ بندی کو فیصلے کی مدد کے بجائے بیوروکریٹک دروازہ سمجھنے کا سب سے زیادہ سامنا بھی۔ قومی خصوصیت کا کام اس بنیادی ڈھانچے کو کمیشن کرنا اور برقرار رکھنا ہے — کلیئرنگ ہاؤس کو فنڈ کرنا، اس کے شواہد کے معیار طے کرنا، اور یقینی بنانا کہ اس کی درجہ بندیاں واقعی کاروباری مقدمے لکھنے والے عہدیداروں تک پہنچیں (دیکھیں موضوع 2.5 — کاروباری مقدمات اور قدر برائے رقم)، بجائے اس کے کہ وہ اچھی ساکھ والی ویب سائٹ رہے جسے پالیسی ٹیمیں مہلت کے دباؤ میں شاذ و نادر دیکھتی ہیں۔

سماجی شعبہ اور غیر منافع بخش ادارے

غیر منافع بخش اور خیراتی ادارے عموماً بڑے پیمانے پر سخت جائزے چلانے کے وسائل نہیں رکھتے، جو انہیں بیرونی ترکیب کے اداروں پر بہت زیادہ منحصر بناتا ہے اور بڑھتی ہوئی تعداد میں ان مالی معاونین پر جو گرانٹ کی شرط کے طور پر درجہ بند شواہد کی سطح سے ہم آہنگی کا تقاضا کرتے ہیں۔ یہ مخصوص خطرہ پیدا کرتا ہے: مالی دباؤ میں ادارے اس کو بڑھا چڑھا کر بیان کرنے پر مائل ہو سکتے ہیں کہ ان کا پروگرام کتنی اچھی طرح موافق درجہ بندی سے میل کھاتا ہے — شواہد کی ملمع کاری کی ایک شکل — یا اس کے برعکس، چھوٹے مگر حقیقی طور پر مؤثر مقامی خیراتی ادارے فنڈنگ سے باہر نچوڑے جا سکتے ہیں کیونکہ وہ کبھی اتنے بڑے نہیں رہے کہ ایسے شواہد پیدا کر سکیں جنہیں قومی کلیئرنگ ہاؤس اعلیٰ درجہ دے (اس دباؤ کے پیچھے فنڈنگ کے ڈھانچوں کے لیے دیکھیں موضوع 3.8 — سماجی شعبے اور غیر منافع بخش اداروں کا انتظام)۔

کثیر فریقی اور بین الاقوامی ادارے

کثیر فریقی اور بین الاقوامی ادارے عمومیت کے مسئلے کا سامنا اس کی سب سے شدید صورت میں کرتے ہیں: ایک ملک کے صحت کے نظام، زرعی شعبے یا لیبر منڈی میں ثابت مداخلت معمول کے طور پر بہت مختلف معاشی اور ادارہ جاتی سیاق کے لیے تجویز کی جاتی ہے، اور ترکیب کا ادب اس غیر تائید یافتہ منتقلی کو پہلے کے بجائے بعد میں نشان زد کرنے میں بہتر ہے۔ اس خلا کو پاٹنے کے لیے بنائے گئے تحقیقی نیٹ ورک، جیسے عبدالطیف جمیل پاورٹی ایکشن لیب، نے ترقیاتی پالیسی کو ایک ملک کے تصور کے ثبوت کے بجائے سیاق کے مخصوص تکرار کی طرف دھکیلا ہے، مگر عالمی طور پر موازنہ پذیر شواہد اور سیاق پر منحصر اثرات کے درمیان کشمکش اس پیمانے پر ترکیب کی متعین خصوصیت رہتی ہے۔

ناکامی کے عام طریقے

بے عملی کے بہانے کے طور پر شواہد کی درجہ بندی۔ مشکل، متنازع فیصلے کا سامنا کرتی ٹیم غیر معینہ مدت کے لیے ٹالنے کی وجہ کے طور پر «ناکافی شواہد» یا «ابھی تک کوئی بے ترتیب ٹرائل نہیں» کا حوالہ دیتی ہے، جبکہ تاخیر کی ایماندارانہ وجہ سیاسی ناخوشگواری یا جوابدہی سے بچنے کی خواہش ہوتی ہے۔ اس سے ادارہ خود موقع کھو دیتا ہے، اور شواہد کی بنیاد اس حقیقی دنیا کی جانچ سے محروم رہتی ہے جو غیر یقینی حل کر سکتی تھی، اگلے فیصلہ ساز کو بالکل وہی خلا چھوڑتی ہے۔

شواہد کی غیر موجودگی کو غیر موجودگی کے شواہد سمجھنا۔ امید افزا مگر غیر آزمائی ہوئی مقامی جدت کو یوں ختم کیا جاتا ہے گویا وہ آزمائی جا کر ناکام ہو چکی ہو، جبکہ بار بار غلط ثابت قومی پروگرام کو اس لیے فنڈ ملتی رہتی ہے کہ کسی نے شواہد کو خلا کے بجائے منفی نتیجے کے طور پر پیش نہیں کیا۔ دونوں غلطیاں مہنگی ہیں: ایک امید افزا اختیارات بند کر دیتی ہے، دوسری ان پروگراموں کی حفاظت کرتی ہے جنہیں صاف نظر کی ترکیب برسوں پہلے ریٹائر کر دیتی۔

ٹول کٹ کی درجہ بندی کو پورا تجزیہ سمجھنا۔ فیصلہ ساز تالے کا ایک آئیکن یا ستارے کی درجہ بندی پڑھ کر رک جاتا ہے، یہ جانچے بغیر کہ بنیادی مطالعات اس کے سیاق، آبادی یا پیمانے سے میل کھاتے ہیں۔ درجہ بندیاں رسائی کے لیے دانستہ دبائی جاتی ہیں؛ بنیادی جائزے کے بغیر استعمال ہونے پر وہ درجہ بندی کی سادگی کے اشارے سے زیادہ پتلی شواہد کی بنیاد پر پراعتماد فیصلے پیدا کر سکتی ہیں۔

نمایاں جمع شدہ نتیجے کے حق میں غیر ہم آہنگی کو نظرانداز کرنا۔ میٹا تجزیے کا واحد اوسط اثر کا حجم بریفنگ میں حوالہ دیا جاتا ہے جبکہ اسے پیدا کرنے والی مطالعات کے درمیان وسیع تغیر — اکثر زیادہ معلوماتی نتیجہ — چھوڑ دیا جاتا ہے۔ یہ جھوٹی درستگی پیدا کرتا ہے: فیصلہ ساز یوں عمل کرتا ہے گویا ہر نفاذ ایک ہی طرح برتاؤ کرتا ہے، جبکہ نفاذ کا معیار اور سیاق مداخلت کے برابر کام کر رہے ہوتے ہیں۔

اشاعت کے تعصب کو خاموشی سے شواہد کی بنیاد کو شکل دینے دینا۔ ادارہ کسی مداخلت کا جائزہ لیتے وقت صرف شائع شدہ علمی ادب پڑھتا ہے، غیر شائع شدہ منفی ٹرائلز اور اندرونی جائزے کھو دیتا ہے جو کسی جریدے میں کبھی نہیں پہنچے۔ «کیا کارآمد ہے» کی نتیجہ خیز تصویر منظم طور پر مثبت جھکتی ہے، اور اس پر بنے فیصلے بغیر کسی کے دانستہ انتخاب کے وہ جھکاؤ وراثت میں لیتے ہیں۔

پختگی کا نمونہ

فہرستِ جانچ

• واحد مطالعے پر انحصار سے پہلے منظم جائزہ یا «کیا کارآمد ہے» کی درجہ بندی جانچی گئی۔
• بنیادی شواہد کا جائزہ پڑھا گیا، صرف خلاصہ درجہ بندی یا آئیکن نہیں۔
• شواہد کا معیار اور سفارش کی مضبوطی دو الگ فیصلوں کے طور پر بیان کیے گئے۔
• «اثر کا کوئی ثبوت نہیں» بمقابلہ «اثر نہ ہونے کا ثبوت» تحریری مختصر دستاویز میں صراحت سے الگ کیا گیا۔
• جائزہ شدہ مطالعات اور زیرِ نظر فیصلے کے سیاق کا ملاپ جانچا گیا (آبادی، پیمانہ، خدمتی نظام)۔
• جب مکمل جائزہ مدت میں نہ سمائے تو تیز شواہد کے جائزے کا عمل دستیاب ہے اور استعمال ہوا۔
• نتائج کا جائزہ لینے سے پہلے فیصلے کے لیے شواہد کی حد پر اتفاق ہوا۔
• اس ادارے کے اپنے جائزے کو نتیجہ جو بھی ہو شائع کرنے کا منصوبہ موجود ہے۔
• متعلقہ «کیا کارآمد ہے» مرکز یا کلیئرنگ ہاؤس سے مستقل تعلق قائم ہے، دباؤ میں شروع سے نہیں بنایا گیا۔
• حتمی فیصلے کے پیچھے استدلال دستاویز کیا گیا، بشمول غور کردہ اور مسترد شدہ شواہد۔
• فیصلے کا جائزہ قدر کی تجویز اور جواز کے پہلوؤں کے مقابل لیا گیا، صرف شواہد کی مضبوطی نہیں۔

بنیادی ماخذ

• The Cochrane Handbook for Systematic Reviews of Interventions، کوکرین کی برقرار رکھی ہوئی، اس بنیادی طریقے کے لیے جس پر شعبوں میں منظم جائزے کی مشق قائم ہے۔
• کیمبل کولیبریشن کی سماجی، رویے اور فوجداری پالیسی کے لیے منظم جائزوں اور شواہد کی ترکیب پر رہنمائی، صحت سے آگے عوامی پالیسی کے دائروں میں اس طریقے کی براہِ راست توسیع کے لیے۔
• وہاٹ ورکس کلیئرنگ ہاؤس کا معیارات کا ہینڈ بک (انسٹی ٹیوٹ آف ایجوکیشن سائنسز، ریاستہائے متحدہ)، اس کی عملی مثال کے لیے کہ قومی کلیئرنگ ہاؤس صریح مطالعے کے ڈیزائن کے معیار کیسے طے کرتا اور ان کے مقابل شواہد کو درجہ دیتا ہے۔
• ایجوکیشن اینڈومنٹ فاؤنڈیشن کا تدریس اور تعلم کا ٹول کٹ، جمع شدہ شواہد کو موازنہ پذیر لاگت، اثر اور شواہد کی مضبوطی کی درجہ بندیوں میں بدلنے کی عملی، عملی ماہرین کی طرف رخ والی مثال کے لیے۔
• اقتصادی تعاون و ترقی کی تنظیم (OECD) کا شواہد سے آگاہ پالیسی سازی کی صلاحیت بنانے پر کام، اس کے بین الملکی بیان کے لیے کہ حکومتیں شواہد کے استعمال کی طلب اور رسد کے پہلو کیسے منظم کرتی ہیں۔
• کالج آف پولیسنگ کا جرم میں کمی کے لیے «کیا کارآمد ہے» مرکز اور جرم میں کمی کا ٹول کٹ، صحت اور تعلیم سے باہر لاگو ہونے والے کلیئرنگ ہاؤس کے نمونے کی مزید عملی مثال کے لیے۔

حوالہ جات

1. Systematic review — Wikipedia — https://en.wikipedia.org/wiki/Systematic_review
2. Meta-analysis — Wikipedia — https://en.wikipedia.org/wiki/Meta-analysis
3. Evidence-based policy — Wikipedia — https://en.wikipedia.org/wiki/Evidence-based_policy
4. Cochrane (organisation) — Wikipedia — https://en.wikipedia.org/wiki/Cochrane_(organisation)
5. Campbell Collaboration — Wikipedia — https://en.wikipedia.org/wiki/Campbell_Collaboration
6. What Works Clearinghouse — Wikipedia — https://en.wikipedia.org/wiki/What_Works_Clearinghouse
7. Education Endowment Foundation — Wikipedia — https://en.wikipedia.org/wiki/Education_Endowment_Foundation
8. Publication bias — Wikipedia — https://en.wikipedia.org/wiki/Publication_bias
9. Randomized controlled trial — Wikipedia — https://en.wikipedia.org/wiki/Randomized_controlled_trial
10. Evidence of absence — Wikipedia — https://en.wikipedia.org/wiki/Evidence_of_absence
11. Hierarchy of evidence — Wikipedia — https://en.wikipedia.org/wiki/Hierarchy_of_evidence
12. GRADE approach — Wikipedia — https://en.wikipedia.org/wiki/GRADE_approach
13. Cochrane Handbook for Systematic Reviews of Interventions — Cochrane — https://www.cochrane.org/authors/handbooks-and-manuals/handbook/current
14. Campbell Collaboration — Campbell Collaboration — https://www.campbellcollaboration.org/
15. What Works Clearinghouse Standards Handbook — Institute of Education Sciences, U.S. Department of Education — https://ies.ed.gov/ncee/wwc/Handbooks
16. Teaching and Learning Toolkit — Education Endowment Foundation — https://educationendowmentfoundation.org.uk/education-evidence/teaching-learning-toolkit
17. Building Capacity for Evidence-Informed Policy-Making — OECD — https://www.oecd.org/en/publications/building-capacity-for-evidence-informed-policy-making_86331250-en.html
18. What Works Center for Crime Reduction — College of Policing — https://www.college.police.uk/research/what-works-center-crime-reduction