প্রমাণ সংশ্লেষণ ও কী কাজ করে

কেন এটি জনমূল্যে গুরুত্বপূর্ণ

একজন মন্ত্রী, মেয়র বা দাতব্য সংস্থার কর্মসূচি-পরিচালকের হাতে ভিত্তি করে কাজ করার মতো একটি একক, পরিচ্ছন্ন গবেষণার বিলাসিতা খুব কমই থাকে। আরও প্রায়ই টেবিলে থাকে পরস্পরবিরোধী তিনটি মূল্যায়ন, তাদের বেছে বেছে উদ্ধৃত করা একটি সাহিত্য-পর্যালোচনা, নিজের পক্ষে মানানো একটি পরীক্ষা নাড়াতে থাকা চাপ-গোষ্ঠী, এবং গবেষণার গতি নয়, বাজেট-চক্র নির্ধারিত একটি সময়সীমা। প্রমাণ সংশ্লেষণ আছে কারণ স্বতন্ত্র গবেষণা কোলাহলপূর্ণ: নমুনা ছোট, প্রেক্ষাপট ভিন্ন, এবং যেকোনো একটি ফল একটি আকস্মিকতা, ভ্রমণ না করা একটি স্থানীয় মিল, বা একটি প্রকৃত প্রভাব হতে পারে। একজন নেতার যে প্রশ্নের উত্তর দরকার তা খুব কমই "এই একটি গবেষণা কী পেয়েছে?" বরং "যা কিছু বিশ্বাসযোগ্যভাবে চেষ্টা করা হয়েছে তার সবকিছু জুড়ে, আমি যদি এখানে, এখন, এটি করি তাহলে কী আশা করা উচিত?"

জনমূল্য তত্ত্ব একে নিছক কারিগরি সূক্ষ্মতার চেয়ে বেশি করে তোলে। যৌথ সম্পদে অর্থায়িত একটি কর্মসূচি এমন একটি মূল্য-প্রস্তাবের ওপর দাঁড়ায় যা নাগরিকেরা সমষ্টিগতভাবে অনুমোদন করবেন (দেখুন বিষয় 2.1 — জনমূল্য স্কোরকার্ড ও ফলাফল কাঠামো সেই প্রস্তাব কীভাবে বিবৃত ও ট্র্যাক হয় তার জন্য)। একটি একক বেছে-নেওয়া গবেষণা, বা কোনো প্রমাণ-পর্যালোচনা ছাড়াই, গড়া প্রস্তাব একটি যত্নশীল সংশ্লেষণে গড়া প্রস্তাবের চেয়ে বৈধতার ওপর দুর্বলতর দাবি — এবং কার্যকর সক্ষমতার দুর্বলতর ভিত্তিও, কারণ কর্মী ও বাজেট তার ভিত্তিতে অঙ্গীকার করা হয়। "কী কাজ করে" আন্দোলন — নীতি-প্রমাণের মান ও শক্তি মূল্যায়নকারী স্বাধীন সংস্থার নেটওয়ার্ক — সরাসরি এই সমস্যা থেকে বেড়ে উঠেছে: অনেক সরকারি সিদ্ধান্ত সবচেয়ে ভালো-সমর্থিত গবেষণা নয়, সবচেয়ে সোচ্চার গবেষণার ওপর নেওয়া হচ্ছিল।

এই বিষয় যে কঠিনতর সমস্যা সম্বোধন করে তা হলো সংশ্লেষণ নিজেই অনিশ্চিত, বিতর্কিত বা সময়মতো পাওয়া না গেলে একজন নেতা কী করেন। প্রমাণ-স্তরবিন্যাস একটি অগোছালো প্রমাণ-ভিত্তিতে শৃঙ্খলা আনতে নির্মিত হয়েছিল, কিন্তু অসতর্কভাবে ব্যবহৃত হলে, "প্রমাণ এখনও যথেষ্ট শক্ত নয়" এমন সিদ্ধান্ত এড়ানোর স্থায়ী অজুহাত হয়ে ওঠে যার জন্য বাস্তব আসলে অপেক্ষা করবে না। যে নেতা সংশ্লেষণ কীভাবে কাজ করে এবং এর সীমা কোথায় তা বোঝেন, তিনি সতর্কতার যোগ্য প্রকৃত অনিশ্চয়তা এবং নিষ্ক্রিয়তার আড়াল হিসেবে ব্যবহৃত স্তরবিন্যাসের মধ্যে পার্থক্য বলতে পারেন।

এই বিষয় একটি সংশ্লেষণ যে কার্য-কারণ অনুমান পদ্ধতির ওপর নির্ভর করে তার স্বাভাবিক উত্তরসূরি (দেখুন বিষয় 2.4 — সরকারি খাতের অর্থমিতি ও কর্মসূচি মূল্যায়ন) এবং একটি সংশ্লেষণ শেষ পর্যন্ত যে ফলাফল-কাঠামো সেবা করে তার পাশাপাশি বসে, তার স্থলাভিষিক্ত হয় না (দেখুন বিষয় 2.1 — জনমূল্য স্কোরকার্ড ও ফলাফল কাঠামো)। যে নেতা একটি পদ্ধতিগত পর্যালোচনা পড়তে, একটি কী-কাজ-করে রেটিং বুঝতে, এবং অনুপস্থিত বনাম নেতিবাচক প্রমাণ নিয়ে স্পষ্টভাবে যুক্তি দিতে পারেন, তিনি কেবল "আরও প্রমাণ" দাবি করতে বা হাতে ধরিয়ে দেওয়া প্রথম গবেষণা গ্রহণ করতে পারা নেতার চেয়ে ভালো জীবন্ত সিদ্ধান্ত নেন।

মূল ধারণা

একটি পদ্ধতিগত পর্যালোচনা (সিস্টেমেটিক রিভিউ) হলো একটি সংজ্ঞায়িত প্রশ্নের প্রমাণের সংশ্লেষণ যা গবেষণা খুঁজতে, মূল্যায়ন করতে ও একত্র করতে একটি সুস্পষ্ট, পূর্ব-নির্ধারিত, পুনরুৎপাদনযোগ্য পদ্ধতি ব্যবহার করে, লেখকের বিবেচনায় উৎস বাছাই করা একটি আখ্যানমূলক সাহিত্য-পর্যালোচনার বিপরীতে (দেখুন Systematic review)। এর সংজ্ঞায়িত বৈশিষ্ট্য হলো অনুসন্ধান শুরুর আগে লেখা একটি নিবন্ধিত প্রোটোকল, অপ্রকাশিত ও ধূসর সাহিত্য অন্তর্ভুক্ত করা অনুসন্ধান-কৌশল, সুস্পষ্ট অন্তর্ভুক্তি-মাপকাঠি এবং প্রতিটি গবেষণার পক্ষপাত-ঝুঁকি মূল্যায়নের একটি মানসম্মত পদ্ধতি। এটিই একটি পদ্ধতিগত পর্যালোচনাকে পাদটীকাসহ সুলিখিত প্রবন্ধ থেকে আলাদা করে: একই প্রোটোকল অনুসরণ করা অন্য দল মোটামুটি একই প্রমাণ পাবে এবং মোটামুটি একই উপসংহারে পৌঁছাবে।

মেটা-বিশ্লেষণ (মেটা-অ্যানালিসিস) হলো পদ্ধতিগত পর্যালোচনার সঙ্গে সবচেয়ে প্রায়ই জুড়ে দেওয়া পরিসংখ্যান-কৌশল: এটি একাধিক স্বাধীন গবেষণার পরিমাণগত প্রভাব-আকারকে একটি একক, আরও নিখুঁত অনুমানে একত্র করে, সাধারণত প্রতিটি গবেষণাকে তার নমুনার আকার ও মান দিয়ে ওজন করে (দেখুন Meta-analysis)। একটি মেটা-বিশ্লেষণ ততটাই ভালো যতটা তাতে খাওয়ানো গবেষণা; পাঁচটি দুর্বল গবেষণা একত্র করলে সম্ভবত পক্ষপাতদুষ্ট প্রভাবের আরও নিখুঁত অনুমান পাওয়া যায়, নির্ভরযোগ্য নয়। তাই বিশ্লেষকেরা ভিন্নধর্মিতা (হেটেরোজেনিটি) প্রতিবেদন করেন — গবেষণার ফল সম্ভাবনা যতটা পূর্বাভাস দিত তার বাইরে কতটা ভিন্ন — কারণ উচ্চ ভিন্নধর্মিতা সংকেত দেয় গবেষণাগুলো আসলে একই জিনিস পরীক্ষা করছিল না, এবং একটি একক একত্রিত সংখ্যা বিভ্রান্তিকর হতে পারে।

প্রকাশনা-পক্ষপাত (পাবলিকেশন বায়াস) হলো ইতিবাচক, তাৎপর্যপূর্ণ ফলের গবেষণা প্রকাশিত হওয়ার প্রবণতা যখন শূন্য বা নেতিবাচক ফল গবেষকের ফাইল-ড্রয়ারে পড়ে থাকে, যা একটি হস্তক্ষেপকে সাহিত্যে বাস্তবের চেয়ে বেশি সংগতভাবে কার্যকর দেখায় (দেখুন Publication bias)। একটি কঠোর পর্যালোচনা কেবল জার্নাল প্রবন্ধ নয়, পরীক্ষা-নিবন্ধন ও অপ্রকাশিত মূল্যায়ন অনুসন্ধান করে এটি সংশোধন করে। যে নেতা কেবল প্রকাশিত প্রবন্ধে গড়া সংশ্লেষণ পড়েন তাঁর জিজ্ঞেস করা উচিত যে গবেষণাগুলো কখনও ছাপায় আসেনি তা খুঁজে পেতে পর্যালোচকেরা কী করেছেন।

প্রমাণের স্তরবিন্যাস (হায়ারার্কি অব এভিডেন্স) গবেষণা-নকশাগুলোকে ক্রম দেয় তারা বিভ্রান্তিকর চলক ও পক্ষপাত কতটা ভালোভাবে নিয়ন্ত্রণ করে তার ভিত্তিতে, সাধারণত দৈবচয়িত পরীক্ষার মেটা-বিশ্লেষণ শীর্ষে, তারপর স্বতন্ত্র দৈবচয়িত নিয়ন্ত্রিত পরীক্ষা, তারপর আধা-পরীক্ষামূলক ও পর্যবেক্ষণমূলক নকশা, এবং বিশেষজ্ঞ-মতামত সবচেয়ে নিচে (দেখুন Hierarchy of evidence)। একটি দৈবচয়িত নিয়ন্ত্রিত পরীক্ষা (RCT) অংশগ্রহণকারীদের হস্তক্ষেপ বা তুলনা-গোষ্ঠীতে সম্ভাবনার ভিত্তিতে বরাদ্দ করে, চারপাশে ঘটা সবকিছু থেকে কার্য-কারণ প্রভাব আলাদা করার একক সবচেয়ে শক্তিশালী হাতিয়ার (দেখুন Randomized controlled trial; এমন নকশা কীভাবে গড়া ও বিশ্লেষিত হয় তার জন্য দেখুন বিষয় 2.4 — সরকারি খাতের অর্থমিতি ও কর্মসূচি মূল্যায়ন)। স্তরবিন্যাস সত্যিই উপযোগী হিউরিস্টিক, কিন্তু একটি হিউরিস্টিক, আইন নয়: বিরল বা ধীর-গতির নীতির একটি সুপরিচালিত পর্যবেক্ষণমূলক গবেষণা একটি দুর্বলভাবে পরিচালিত, অপর্যাপ্ত-সামর্থ্যের পরীক্ষাকে ছাড়িয়ে যেতে পারে, এবং যে নেতা একে পরম ক্রম ধরেন তিনি মাঝে মাঝে আরও প্রতিষ্ঠিত নকশার জন্য আরও প্রাসঙ্গিক প্রমাণ ফেলে দেবেন।

GRADE পন্থা — Grading of Recommendations, Assessment, Development and Evaluations — একটি দ্বিতীয়, পৃথক বিচার আনুষ্ঠানিক করে যা কেবল স্তরবিন্যাস করে না: এটি প্রমাণের নিশ্চয়তা এবং, স্বাধীনভাবে, তার ভিত্তিতে কাজ করার সুপারিশের শক্তি উভয়ই রেটিং করে, কারণ শক্তিশালী প্রমাণ সবসময় শক্তিশালী সুপারিশ যথার্থ করে না, এবং দুর্বল প্রমাণ সবসময় গুরুতর, জরুরি ক্ষতির বিরুদ্ধে নিষ্ক্রিয়তা যথার্থ করে না (দেখুন GRADE approach)। সময়-চাপে থাকা সিদ্ধান্ত-গ্রহণকারীর জন্য এই বিষয়ের একক সবচেয়ে উপযোগী ধারণা এই বিচ্ছিন্নতা: এটি একজন নেতাকে সততার সঙ্গে বলতে দেয়, "এখানে প্রমাণ মধ্যম, এবং বাজি ও অপেক্ষার ব্যয় বিবেচনায়, আমি সুপারিশ করছি আমরা এগোই" — নিশ্চয়তার জন্য অপেক্ষা ও প্রমাণ সম্পূর্ণ উপেক্ষার মধ্যকার একটি মিথ্যা পছন্দের বদলে একটি প্রতিরক্ষাযোগ্য, নথিবদ্ধ বিচার।

জীবন্ত নীতি-বিতর্কে ধ্রুবকভাবে পুনরাবৃত্ত একটি পার্থক্য হলো প্রমাণের অনুপস্থিতি ও অনুপস্থিতির প্রমাণ-এর মধ্যে: একটি হস্তক্ষেপের প্রভাব নিয়ে গবেষণার অভাব ("প্রভাবের কোনো প্রমাণ নেই") এমন একটি সুসামর্থ্যের গবেষণা-সমষ্টির মতো দাবি নয় যা ইতিবাচকভাবে কোনো প্রভাব পায়নি ("প্রভাব নেই-র প্রমাণ") (দেখুন Evidence of absence)। এখনও কোনো মূল্যায়ন-না-থাকা একটি নতুন স্থানীয় কর্মসূচি কেবল পরীক্ষিত হয়নি; একটি সুগবেষিত জাতীয় কর্মসূচি যা বারবার কোনো ফলাফল নড়াতে পায়নি তা পরীক্ষিত এবং কাজ করে না প্রমাণিত। দুটিকে গুলিয়ে ফেলা একজন সরকারি নেতার সবচেয়ে পরিণামবাহী ভুলগুলোর একটি: একটি অপরীক্ষিত কিন্তু প্রতিশ্রুতিশীল পরীক্ষামূলক কর্মসূচিকে ব্যর্থ হয়েছে ধরে বন্ধ করা, বা একটি বারবার-খণ্ডিত কর্মসূচিকে এখনও কেউ যথেষ্ট ঘনিষ্ঠভাবে দেখেনি ধরে অর্থায়ন চালিয়ে যাওয়া।

প্রমাণ-ভিত্তিক নীতি (এভিডেন্স-বেজড পলিসি) হলো বৃহত্তর আন্দোলন ও আদর্শিক দাবি যে সরকারি সিদ্ধান্ত কেবল মতাদর্শ, উপাখ্যান বা সহজাত প্রবৃত্তির বদলে কঠোরভাবে প্রতিষ্ঠিত প্রমাণের ওপর ভিত্তি করা উচিত (দেখুন Evidence-based policy)। এর সমালোচকেরা, এবং ক্রমবর্ধমানভাবে এর নিজস্ব প্রবক্তারা, "প্রমাণ-অবহিত নীতি" পছন্দ করেন, যা স্বীকার করে প্রমাণ একাধিক উপকরণের একটি — মূল্যবোধ, ম্যান্ডেট, ব্যয় এবং এই বই যে বৈধতার প্রশ্নকে ভিত্তিমূলক ধরে — কেবল প্রমাণ নিষ্পত্তি করতে পারে এমন যান্ত্রিক সিদ্ধান্ত-নিয়ম নয়।

এই আন্দোলন থেকে বেড়ে উঠেছে কী-কাজ-করে কেন্দ্র বা ক্লিয়ারিংহাউস প্যাটার্ন: একটি স্বাধীন সংস্থা যা একটি নীতি-ক্ষেত্রে হস্তক্ষেপের প্রমাণ পদ্ধতিগতভাবে পর্যালোচনা করে এবং প্রতিটি স্থানীয় কমিশনারকে নিজস্ব পর্যালোচনা চালাতে ছেড়ে না দিয়ে সহজলভ্য, তুলনীয় রেটিং প্রকাশ করে। Cochrane 1993 সাল থেকে স্বাস্থ্যসেবায় এই মডেলের পথিকৃৎ, চিকিৎসার বাইরেও ব্যবহৃত পদ্ধতিগত পর্যালোচনা পদ্ধতির একটি জীবন্ত হ্যান্ডবুক রক্ষা করে (দেখুন Cochrane (organisation))। Campbell Collaboration একই পদ্ধতি সামাজিক নীতি, ফৌজদারি বিচার, শিক্ষা ও আন্তর্জাতিক উন্নয়নে প্রসারিত করেছে (দেখুন Campbell Collaboration)। জাতীয় ক্লিয়ারিংহাউস অনুসরণ করেছে: যুক্তরাষ্ট্রের What Works Clearinghouse, 2002 সাল থেকে এর Institute of Education Sciences দ্বারা পরিচালিত, সুস্পষ্ট নকশা-মানের বিপরীতে শিক্ষা-গবেষণা পর্যালোচনা করে (দেখুন What Works Clearinghouse); ইংল্যান্ডের Education Endowment Foundation একটি ব্যাপকভাবে ব্যবহৃত Teaching and Learning Toolkit প্রকাশ করে যা শ্রেণিকক্ষের হস্তক্ষেপকে ব্যয়, প্রমাণের শক্তি ও সাধারণ প্রভাবে একটি তুলনীয় রূপে রেটিং করে (দেখুন Education Endowment Foundation)। অপরাধ হ্রাস, প্রাথমিক হস্তক্ষেপ, গৃহহীনতা এবং বার্ধক্যে ভালো থাকার জন্য সমতুল্য কেন্দ্র আছে — একই পদ্ধতিতে গড়া একটি ছোট আন্তর্জাতিক পরিবার: পদ্ধতিগত পর্যালোচনা, স্বচ্ছ রেটিং, এবং একটি চর্চাকারী-মুখী সারাংশ যা পড়তে কোনো পদ্ধতিবিদ দরকার হয় না।

সেরা অনুশীলন

1. একক গবেষণার আগে সংশ্লেষণ চান। একটি চমকপ্রদ ফল আপনার টেবিলে এলে, গবেষণাটি আলাদাভাবে বিশ্বাসযোগ্য দেখায় কি না তার আগে জিজ্ঞেস করুন সেই হস্তক্ষেপের জন্য একটি পদ্ধতিগত পর্যালোচনা বা কী-কাজ-করে রেটিং ইতিমধ্যে আছে কি না।
2. যেকোনো টুলকিট রেটিংয়ের পাশাপাশি অন্তর্নিহিত পর্যালোচনাটি পড়ুন, তার বদলে নয়। একটি এক-লাইনের রেটিং বা তালার আইকন একটি বিচার সংক্ষেপ করে; এটি কোন প্রমাণের ওপর দাঁড়িয়ে এবং আপনার প্রেক্ষাপটে কতটা সরাসরি প্রযোজ্য তা বোঝার বিকল্প নয়।
3. প্রমাণের মান আপনার সুপারিশের শক্তি থেকে স্পষ্টভাবে আলাদা করুন। অনানুষ্ঠানিকভাবেও GRADE-এর যুক্তি ধার নিন: প্রমাণ কতটা নিশ্চিত তা বলুন, তারপর আলাদাভাবে বলুন বাজি ও ব্যয়ের সঙ্গে মিলিয়ে সেই নিশ্চয়তা এখনই কাজ করাকে কতটা জোরালোভাবে যথার্থ করে।
4. সিদ্ধান্তের আগে আপনি "এখনও কোনো প্রমাণ নেই" না "প্রভাব নেই-র প্রমাণ"-এর মুখোমুখি তার নাম দিন। প্রতিটি প্রমাণ-সংক্ষিপ্তসারে এই পার্থক্য লিখিতভাবে রাখুন, কারণ দুটি পরিস্থিতি প্রায় বিপরীত সাড়া দাবি করে — সতর্ক পরীক্ষামূলক বাস্তবায়ন বনাম থামানো বা পুনর্নকশা।
5. প্রভাব স্থানান্তরিত হবে ধরার আগে পর্যালোচনার প্রেক্ষাপট ও আপনার প্রেক্ষাপটের মিল পরীক্ষা করুন। অন্যত্র চালানো গবেষণা থেকে একত্রিত প্রভাব-আকার একটি গড়, প্রতিশ্রুতি নয়; জিজ্ঞেস করুন মূলত কী প্রভাবকে সংযত করেছিল এবং সেই সংযমকারীরা এখানে উপস্থিত কি না।
6. একটি পূর্ণ পদ্ধতিগত পর্যালোচনা আপনার সময়সীমায় না মানালে একটি দ্রুত প্রমাণ মূল্যায়ন কমিশন করুন। বিদ্যমান সাহিত্যের একটি কাঠামোবদ্ধ, সময়-সীমিত পর্যালোচনা — মাস নয়, দিন বা সপ্তাহ — নতুন প্রাথমিক গবেষণা ও কোনো পর্যালোচনা না থাকার মধ্যে একটি বৈধ মধ্যপন্থা।
7. ফল যা-ই হোক, আপনার নিজস্ব মূল্যায়ন প্রকাশ করুন। শূন্য ও নেতিবাচক ফল পরবর্তী সংশ্লেষণের জন্য ইতিবাচকগুলোর মতোই মূল্যবান; সেগুলো আটকে রাখা প্রকাশনা-পক্ষপাত খারাপ করে যা আপনার ক্ষেত্রে প্রতিটি ভবিষ্যৎ পর্যালোচনাকে দুর্বল করে।
8. প্রয়োজনের আগেই আপনার ক্ষেত্রে একটি কী-কাজ-করে কেন্দ্র বা ক্লিয়ারিংহাউসের সঙ্গে স্থায়ী সম্পর্ক গড়ুন। একটি জীবন্ত সংকটে প্রথমবার একটি সংশ্লেষণ সংস্থার টুলকিট ঠান্ডা অনুসন্ধান করা, তা কী ঢাকে এবং ফাঁক সম্পর্কে কাকে জিজ্ঞেস করতে হবে তা আগেই জানার চেয়ে অনেক ধীর।
9. ফল আসার পরে নয়, আগেই আপনার প্রমাণ-সীমা স্থির করুন। বড় করা, আরও পরীক্ষা করা বা থামানোকে কোন স্তরের প্রমাণ যথার্থ করবে তা আগে থেকেই সম্মত হোন, ইতিমধ্যে নেওয়া সিদ্ধান্তের সঙ্গে মেলাতে অস্পষ্ট ফল পুনর্ব্যাখ্যার প্রলোভন কমাতে।
10. সব সন্দেহ দূর করবে এমন গবেষণা খোঁজার সময় সীমিত করুন। একটি নিখুঁত, দ্ব্যর্থহীন প্রমাণ-ভিত্তির জন্য অপেক্ষা করা নিজেই একটি সিদ্ধান্ত, সাধারণত আপনি যা ইতিমধ্যে করেন তা করে যাওয়ার; একটি সময়সীমা ঠিক করুন যা বিলম্বের ব্যয় এবং দুর্বল প্রমাণে কাজ করার ব্যয় উভয়কে সম্মান করে।
11. সংশ্লেষণকে মূল্য-প্রস্তাবের একটি উপকরণ ধরুন, তার বিকল্প নয়। ব্যয়, বণ্টনমূলক প্রভাব ও বৈধতা পাশাপাশি ওজন করা হলে সবচেয়ে ভালো-সমর্থিত হস্তক্ষেপ স্বয়ংক্রিয়ভাবে সঠিক পছন্দ নয় (দেখুন বিষয় 2.1 — জনমূল্য স্কোরকার্ড ও ফলাফল কাঠামো)।
12. আপনি কোন প্রমাণ বিবেচনা করেছেন এবং কেন তা এভাবে ওজন করেছেন তা নথিভুক্ত করুন। পর্যালোচিত গবেষণা ও চূড়ান্ত বিচারের পেছনের যুক্তির একটি লিখিত নথি সিদ্ধান্তের বৈধতা এবং পরবর্তী পর্যালোচকের তা থেকে শেখার সামর্থ্য উভয়কেই রক্ষা করে।

আপনার দলের সঙ্গে আলোচনার প্রশ্ন

আমরা শেষবার কখন একটি পদ্ধতিগত পর্যালোচনা বা কী-কাজ-করে রেটিং আমরা যা করার পরিকল্পনা করেছিলাম তার বিপরীতে যাওয়ায় একটি জীবন্ত সিদ্ধান্ত বদলেছিলাম? সৎ উত্তর যদি "কখনও না" হয়, তবে তা নিয়ে ভাবার যোগ্য, কারণ এটি ইঙ্গিত দেয় প্রমাণ-পর্যালোচনা প্রকৃত যাচাইয়ের বদলে নিশ্চিতকরণ-অনুশীলন হিসেবে কাজ করতে পারে। একটি সাম্প্রতিক সিদ্ধান্ত আলোচনা করুন যেখানে প্রমাণ-ভিত্তি মিশ্র ছিল এবং দেখুন এটি আসলে পছন্দকে আকার দিয়েছিল, নাকি আগে-নেওয়া উপসংহার সমর্থনেই মূলত সংগৃহীত হয়েছিল। ভাবুন প্রমাণ সিদ্ধান্ত-গ্রহণকারীদের কাছে কীভাবে ও কখন পৌঁছায় তাতে কী বদলাতে হবে যাতে এর প্রতীকী নয়, প্রকৃত প্রভাব থাকে।

আমরা কি কোথাও "প্রভাবের কোনো প্রমাণ নেই"-কে "প্রভাব নেই-র প্রমাণ" মনে করছি, বা উল্টোটা? আপনার বর্তমান কর্মসূচি-পোর্টফোলিও ধরে এগোন এবং এমন যেকোনো কর্মসূচি চিহ্নিত করুন যা আপনি নীরবে কম অগ্রাধিকার দিয়েছেন কারণ "প্রমাণ নেই", এবং পরীক্ষা করুন এর অর্থ প্রকৃত অপরীক্ষিত না প্রকৃত খণ্ডিত। উল্টো দিকেও একই করুন: এমন যেকোনো কর্মসূচি যা আপনি অর্থায়ন করে যাচ্ছেন কারণ "কেউ দেখায়নি এটি কাজ করে না", যখন আসলে কেউ দেখেনি। আলোচনা করুন সবচেয়ে পরিণামবাহী দুই-তিনটি উদাহরণ সংশোধন করতে কী লাগবে, এবং সেই সংশোধনের মালিক কে হওয়া উচিত।

একটি সিদ্ধান্তের জন্য শুক্রবারের মধ্যে প্রমাণ দরকার হলে, আমাদের কি প্রকৃতই একটি দ্রুত প্রমাণ মূল্যায়ন প্রক্রিয়া আছে, নাকি চাপের মধ্যে একটি তাৎক্ষণিকভাবে গড়তাম? সময়ের চাপ অনুমানমূলক নয়; এটি সেই স্বাভাবিক অবস্থা যার অধীনে বেশির ভাগ প্রকৃত প্রমাণ-ভিত্তিক সিদ্ধান্ত নেওয়া হয়। আলোচনা করুন আপনার প্রতিষ্ঠানের একটি স্থায়ী পদ্ধতি আছে কি না — একটি নামকরা দল, একটি ছক, আগে দেখার মতো কী-কাজ-করে কেন্দ্রের একটি ছোট তালিকা — নাকি প্রতিটি জরুরি অনুরোধ একটি ফাঁকা পাতা থেকে শুরু হয়। শেষেরটি হলে, আলোচনা করুন একটি ন্যূনতম কার্যকর দ্রুত-মূল্যায়ন প্রক্রিয়া কেমন দেখাবে এবং এর মালিক কে হবেন।

আমরা আসলে কার প্রমাণ-স্তরবিন্যাস ব্যবহার করছি, এবং তা কি এই সিদ্ধান্তের বাজি ও প্রত্যাবর্তনযোগ্যতার সঙ্গে মেলে? বিভিন্ন ক্ষেত্র তাদের প্রমাণ-মান ভিন্নভাবে প্রয়োগ করে, এবং অপ্রত্যাবর্তনযোগ্য, উচ্চ-বাজির সিদ্ধান্তের জন্য ক্যালিব্রেট করা একটি স্তরবিন্যাস সবসময় একটি সস্তা, প্রত্যাবর্তনযোগ্য, সহজে-পর্যবেক্ষণযোগ্য পরীক্ষামূলক কর্মসূচির জন্য সঠিক মাপকাঠি নয়। আলোচনা করুন আপনার প্রতিষ্ঠান বাজি নির্বিশেষে একটি প্রমাণ-মান সমানভাবে প্রয়োগ করে কি না, এবং তা আপনাকে খারাপ সিদ্ধান্ত থেকে বাঁচায় নাকি কেবল ভালোগুলো ধীর করে। ফল কী বলে জানার আগে, আপনার এজেন্ডার পরবর্তী তিনটি সিদ্ধান্তের জন্য কোন মান আবশ্যক হওয়া উচিত তা দল হিসেবে একমত হোন।

আমাদের নিজস্ব মূল্যায়ন ফাইল-ড্রয়ারে হারিয়ে যাওয়া ঠেকাতে আমরা মূর্তভাবে কী করেছি? আপনার প্রতিষ্ঠান যে প্রতিটি অপ্রকাশিত শূন্য ফল ধরে বসে আছে তা এমন ফাঁক যা অন্য কোনো প্রতিষ্ঠানকে কঠিন উপায়ে পুনরাবিষ্কার করতে হবে। সততার সঙ্গে আপনার ট্র্যাক-রেকর্ড আলোচনা করুন: আপনার শেষ 10টি মূল্যায়নের কতগুলো বাইরে ভাগ করা হয়েছিল, এবং যেগুলো হয়নি সেগুলোর কী হয়েছে। আরও স্বচ্ছ হওয়ার সাধারণ আকাঙ্ক্ষার বদলে একটি মূর্ত, সম্পদযুক্ত অঙ্গীকারে একমত হোন — একটি প্রকাশনা-নীতি, একটি ভাগাভাগি করা নিবন্ধন।

আমরা কি "আমাদের আরও প্রমাণ দরকার" বাক্যটি সততার সঙ্গে ব্যবহার করছি, নাকি এমন সিদ্ধান্ত এড়ানোর উপায় হিসেবে যা আমরা নিতে চাই না? এটি এই বিষয়ের সবচেয়ে অস্বস্তিকর প্রশ্ন, এবং এটি সরাসরি জিজ্ঞেস করার যোগ্য। প্রমাণের ভিত্তিতে বর্তমানে স্থগিত একটি নির্দিষ্ট সিদ্ধান্ত চিহ্নিত করুন এবং খোলামেলাভাবে আলোচনা করুন আসলে কী আপনার মত বদলাবে, এবং আপনি যে প্রমাণের জন্য অপেক্ষা করছেন তা বাস্তবসম্মতভাবে সময়মতো আসবে কি না। না এলে, আলোচনা করুন চলমান অপেক্ষার বদলে প্রকৃত অনিশ্চয়তার অধীনে একটি সৎ সিদ্ধান্ত কেমন দেখাবে, এবং তা নেওয়ার কর্তৃত্ব কার।

বাস্তবে: একটি জনমূল্যের উদাহরণ

একটি আঞ্চলিক কর্মসংস্থান সংস্থা, শ্রমবাজার কর্মসূচির দায়িত্বে থাকা একটি জাতীয় সরকারি বিভাগের অংশ, একটি বাজেট-চক্রের মধ্যে স্থির করার চাপে ছিল একটি চাকরি-প্রশিক্ষণ পরীক্ষামূলক কর্মসূচি তিনটি জেলা থেকে সমগ্র অঞ্চলে বড় করবে কি না। পরীক্ষামূলক কর্মসূচিটি ভর্তুকিপ্রাপ্ত কর্ম-স্থাপনা ও কাঠামোবদ্ধ পরামর্শদানকে মিলিয়েছিল, এবং তিনটি জেলায় সংস্থার নিজস্ব দৈবচয়িত পরীক্ষা 12 মাসে টেকসই কর্মসংস্থানে একটি মধ্যম কিন্তু পরিসংখ্যানগতভাবে তাৎপর্যপূর্ণ বৃদ্ধি পেয়েছিল। একটি প্রতিদ্বন্দ্বী প্রমাণ-উৎস চিত্রটিকে জটিল করল: আগের বছর প্রকাশিত একটি পদ্ধতিগত পর্যালোচনা, কয়েকটি দেশ জুড়ে নয়টি অনুরূপ কর্মসূচি একত্র করে, প্রায়-শূন্য গড় প্রভাব পেয়েছিল, গবেষণাগুলোর মধ্যে ব্যাপক বৈচিত্র্য এবং কোন কর্মসূচি কাজ করেছিল তা ব্যাখ্যা করার কোনো স্পষ্ট প্যাটার্ন ছাড়াই।

সংস্থার প্রমাণ-ইউনিটের বাজেট জমার সময়সীমার আগে ছয় সপ্তাহ ছিল দুটি ফলাফল মেলাতে। একজন জুনিয়র বিশ্লেষকের প্রথম সহজাত প্রবৃত্তি ছিল একত্রিত পর্যালোচনাকে বেশি কর্তৃত্বপূর্ণ ধরা কেবল কারণ তা বেশি গবেষণা মিলিয়েছে, এবং পরীক্ষামূলক কর্মসূচি বাতিলের সুপারিশ করা। ইউনিটের প্রধান প্রমাণ-উপদেষ্টা আপত্তি করলেন: সত্যিকার ভিন্ন কর্মসূচি জুড়ে প্রায়-শূন্য একত্রিত গড় এই নির্দিষ্ট, সুবাস্তবায়িত স্থানীয় কর্মসূচি ব্যর্থ হবে তার শক্তিশালী প্রমাণ ছিল না — এটি প্রমাণ ছিল যে চাকরি-প্রশিক্ষণ কর্মসূচি সাধারণত মান ও উপযোগিতায় ভিন্নধর্মী, যা ইতিমধ্যে জানা ছিল। পর্যালোচনায় প্রতিবেদিত উচ্চ ভিন্নধর্মিতা নিজেই একত্রিত গড়ের চেয়ে বেশি গুরুত্বপূর্ণ ফল ছিল।

উপদেষ্টা একটি দ্বিমুখী পছন্দের বদলে মধ্যপন্থার প্রস্তাব দিলেন। তিনি অঞ্চলের অর্ধেক পর্যন্ত ধাপে ধাপে বাড়ানোর সুপারিশ করলেন, সম্প্রসারণ-জেলাগুলো দৈবভাবে নির্বাচিত যাতে চালু করা নিজেই একটি অনুমানের বিপরীতে ব্যয় না করে আরও প্রমাণ উৎপন্ন করে (ধাপে ধাপে চালুকে আরও মূল্যায়ন হিসেবে কীভাবে নকশা করা যায় তার জন্য দেখুন বিষয় 2.4 — সরকারি খাতের অর্থমিতি ও কর্মসূচি মূল্যায়ন)। তিনি মূল পরীক্ষাটি পূর্ণভাবে প্রকাশের সুপারিশও করলেন, পদ্ধতি ও কাঁচা উপাত্তসহ, যাতে এটি একটি অভ্যন্তরীণ প্রতিবেদনে পড়ে থাকার বদলে পরবর্তী পদ্ধতিগত পর্যালোচনায় তুলে নেওয়া যায় যা সংস্থার বাইরে কেউ দেখবে না।

বিভাগের নেতৃত্ব ধাপে ধাপে পন্থা অনুমোদন করল, ব্যবসায়িক যুক্তিতে স্পষ্টভাবে কাঠামোবদ্ধ (দেখুন বিষয় 2.5 — ব্যবসায়িক যুক্তি ও অর্থের যথাযথ ব্যবহার) মধ্যম-নিশ্চয়তার প্রমাণের অধীনে নেওয়া সিদ্ধান্ত হিসেবে, 18 মাসের মধ্যে অনিশ্চয়তা মেটানোর অন্তর্নির্মিত ব্যবস্থাসহ, প্রমাণ চূড়ান্ত ছিল বলে নেওয়া সিদ্ধান্ত হিসেবে নয়। 18 মাস পর সম্প্রসারণ-জেলাগুলো মূল পরীক্ষামূলক কর্মসূচির কাছাকাছি প্রভাব দেখাল, এবং বিভাগ দুটি উৎসের কোনোটি একা যা দিতে পারত তার চেয়ে শক্তিশালী প্রমাণ-ভিত্তিতে আরও বড় করল — এবং কেন অপেক্ষা না করে কাজ করা বেছে নিয়েছিল তা দেখানো একটি স্পষ্ট নথি-পথ সহ।

এই দৃশ্যপট দৃষ্টান্তমূলক ও কাল্পনিক; এটি কোনো প্রকৃত বিভাগের কর্মসূচি বা মূল্যায়ন বর্ণনা করে না।

চারটি খাতভিত্তিক দৃষ্টিকোণ

স্থানীয় সরকার

একটি স্থানীয় কর্তৃপক্ষের নিজস্ব পদ্ধতিগত পর্যালোচনা কমিশন করার বাজেট বা কেসলোড খুব কমই থাকে, তাই এর ব্যবহারিক কারুশিল্প হলো প্রকৃত সময়-চাপে জাতীয় ও আন্তর্জাতিক সংশ্লেষণ-প্রমাণকে একটি নির্দিষ্ট স্থানীয় প্রেক্ষাপটে অনুবাদ করা — রেটিং-দেওয়া কোনো হস্তক্ষেপের প্রমাণ-ভিত্তি রেটিংকৃত প্রভাব স্থানান্তরিত হবে ধরার আগে নিজস্ব জনগোষ্ঠী, সেবা-ব্যবস্থা ও অর্থায়ন-স্তরের সঙ্গে মেলে কি না পরীক্ষা করা। স্থানীয় নেতারা এই বিষয়ের সতর্ক করা দুটি ভুলের ব্যয়ের সবচেয়ে কাছে: একটি সংশ্লেষণ ইতিমধ্যে কাজ করে না দেখিয়েছে এমন হস্তক্ষেপে কাজ করা, এবং কোনো কী-কাজ-করে কেন্দ্র এখনও রেটিং দেয়নি বলে একটি প্রকৃতপক্ষে প্রতিশ্রুতিশীল কিন্তু কম-মূল্যায়িত স্থানীয় উদ্ভাবন প্রত্যাখ্যান।

জাতীয় সরকার

জাতীয় সরকার সেই জায়গা যেখানে বেশির ভাগ কী-কাজ-করে কেন্দ্র এবং আনুষ্ঠানিক প্রমাণ-স্তরবিন্যাস নির্দেশনা বসে, জাতীয় বিভাগগুলোকে সংশ্লেষণ-অবকাঠামোর নৈকট্য দেয় কিন্তু একটি প্রমাণ-স্তরবিন্যাসকে সিদ্ধান্ত-সহায়ক না ভেবে আমলাতান্ত্রিক ফটক ভাবার সবচেয়ে বেশি ঝুঁকিও। বৈশিষ্ট্যপূর্ণ জাতীয় কাজ হলো সেই অবকাঠামো কমিশন ও রক্ষা করা — একটি ক্লিয়ারিংহাউসে অর্থায়ন, তার প্রমাণ-মান স্থির করা, এবং তার রেটিং ব্যবসায়িক যুক্তি লেখা কর্মকর্তাদের কাছে প্রকৃতপক্ষে পৌঁছায় তা নিশ্চিত করা (দেখুন বিষয় 2.5 — ব্যবসায়িক যুক্তি ও অর্থের যথাযথ ব্যবহার), সময়সীমার চাপে নীতি-দল খুব কমই দেখে এমন একটি সুনামধন্য ওয়েবসাইট হিসেবে থাকার বদলে।

সামাজিক খাত ও অলাভজনক

অলাভজনক প্রতিষ্ঠান ও দাতব্য সংস্থার সাধারণত বড় মাপে কঠোর মূল্যায়ন চালানোর সম্পদ থাকে না, যা তাদের বাইরের সংশ্লেষণ সংস্থার ওপর, এবং ক্রমবর্ধমানভাবে অনুদানের শর্ত হিসেবে রেটিং-দেওয়া প্রমাণ-স্তরের সঙ্গে সামঞ্জস্য দাবি করা অর্থদাতাদের ওপর, ভারীভাবে নির্ভরশীল করে। এটি একটি বিশিষ্ট ঝুঁকি তৈরি করে: আর্থিক চাপে থাকা প্রতিষ্ঠান তাদের কর্মসূচি একটি অনুকূল রেটিংয়ের সঙ্গে কতটা মেলে তা বাড়িয়ে বলতে প্ররোচিত হতে পারে — প্রমাণ-ধোয়ার একটি রূপ — অথবা, বিপরীতভাবে, ছোট কিন্তু প্রকৃতপক্ষে কার্যকর স্থানীয় দাতব্য সংস্থাগুলো অর্থায়ন থেকে বাদ পড়তে পারে কারণ একটি জাতীয় ক্লিয়ারিংহাউস উচ্চ রেটিং দেয় এমন প্রমাণ উৎপাদনের মতো যথেষ্ট বড় তারা কখনও ছিল না (এই চাপের পেছনের অর্থায়ন-কাঠামোর জন্য দেখুন বিষয় 3.8 — সামাজিক খাত ও অলাভজনক প্রতিষ্ঠান ব্যবস্থাপনা)।

বহুপাক্ষিক ও আন্তর্জাতিক

বহুপাক্ষিক ও আন্তর্জাতিক সংস্থা সাধারণীকরণ-সমস্যার তীব্রতম রূপের মুখোমুখি হয়: এক দেশের স্বাস্থ্য ব্যবস্থা, কৃষি খাত বা শ্রমবাজারে প্রমাণিত হস্তক্ষেপ নিয়মিত একটি খুব ভিন্ন অর্থনৈতিক ও প্রাতিষ্ঠানিক প্রেক্ষাপটের জন্য প্রস্তাবিত হয়, এবং সংশ্লেষণ-সাহিত্য আগে নয়, পরে এই অসমর্থিত স্থানান্তর চিহ্নিত করতে ভালো। এই ব্যবধান বন্ধ করতে নির্মিত গবেষণা-নেটওয়ার্ক, যেমন Abdul Latif Jameel Poverty Action Lab, উন্নয়ন নীতিকে একক-দেশের ধারণা-প্রমাণের বদলে প্রেক্ষাপট-নির্দিষ্ট পুনরাবৃত্তির দিকে ঠেলেছে, কিন্তু বিশ্বব্যাপী তুলনীয় প্রমাণ এবং প্রেক্ষাপট-নির্ভর প্রভাবের মধ্যকার টানাপোড়েন এই মাপে সংশ্লেষণের একটি সংজ্ঞায়িত বৈশিষ্ট্য রয়ে গেছে।

সাধারণ ব্যর্থতার ধরন

নিষ্ক্রিয়তার অজুহাত হিসেবে প্রমাণ-স্তরবিন্যাস। একটি কঠিন, বিতর্কিত সিদ্ধান্তের মুখোমুখি দল অনির্দিষ্টকাল স্থগিত করার কারণ হিসেবে "অপর্যাপ্ত প্রমাণ" বা "এখনও কোনো দৈবচয়িত পরীক্ষা নেই" উদ্ধৃত করে, যখন বিলম্বের সৎ চালিকা শক্তি রাজনৈতিক অস্বস্তি বা জবাবদিহি এড়ানোর ইচ্ছা। এটি প্রতিষ্ঠানকে সুযোগটিই হারায়, এবং প্রমাণ-ভিত্তিকে হারায় একটি প্রকৃত পরীক্ষা যা অনিশ্চয়তা মেটাতে পারত, পরবর্তী সিদ্ধান্ত-গ্রহণকারীর জন্য ঠিক একই ফাঁক রেখে।

প্রমাণের অনুপস্থিতিকে অনুপস্থিতির প্রমাণের সঙ্গে গুলিয়ে ফেলা। একটি প্রতিশ্রুতিশীল কিন্তু অপরীক্ষিত স্থানীয় উদ্ভাবন বন্ধ করা হয় যেন এটি চেষ্টা করা হয়ে ব্যর্থ হয়েছে, আর একটি বারবার-খণ্ডিত জাতীয় কর্মসূচি অর্থায়ন পেতে থাকে কারণ কেউ প্রমাণকে ফাঁকের বদলে নেতিবাচক ফল হিসেবে কাঠামো দেয়নি। দুটি ভুলই ব্যয়বহুল: একটি প্রতিশ্রুতিশীল বিকল্প রুদ্ধ করে, অন্যটি এমন কর্মসূচি রক্ষা করে যা একটি পরিষ্কার-দৃষ্টি সংশ্লেষণ বহু বছর আগে অবসর দিত।

একটি টুলকিট রেটিংকে পূর্ণ বিশ্লেষণ ধরা। একজন সিদ্ধান্ত-গ্রহণকারী একটি তালার আইকন বা তারকা রেটিং পড়ে সেখানেই থামেন, অন্তর্নিহিত গবেষণা তাঁর প্রেক্ষাপট, জনগোষ্ঠী বা মাপের সঙ্গে মেলে কি না না দেখে। রেটিং ইচ্ছাকৃতভাবে সহজলভ্যতার জন্য সংকুচিত; অন্তর্নিহিত পর্যালোচনা ছাড়া ব্যবহৃত হলে, তারা রেটিংয়ের সরলতা যতটা ইঙ্গিত দেয় তার চেয়ে পাতলা প্রমাণ-ভিত্তিতে গড়া আত্মবিশ্বাসী সিদ্ধান্ত তৈরি করতে পারে।

শিরোনাম একত্রিত ফলের পক্ষে ভিন্নধর্মিতা উপেক্ষা। একটি মেটা-বিশ্লেষণের একক গড় প্রভাব-আকার একটি ব্রিফিংয়ে উদ্ধৃত হয় যখন যে গবেষণাগুলো তা উৎপন্ন করেছে তাদের মধ্যকার বিস্তৃত বৈচিত্র্য — প্রায়ই আরও তথ্যপূর্ণ ফল — বাদ পড়ে। এটি মিথ্যা নির্ভুলতা তৈরি করে: একজন সিদ্ধান্ত-গ্রহণকারী যেন প্রতিটি বাস্তবায়ন একই রকম আচরণ করে তেমন কাজ করেন, যখন বাস্তবায়নের মান ও প্রেক্ষাপট হস্তক্ষেপের মতোই সমান কাজ করছে।

প্রকাশনা-পক্ষপাতকে নীরবে প্রমাণ-ভিত্তি আকার দিতে দেওয়া। একটি প্রতিষ্ঠান কোনো হস্তক্ষেপ মূল্যায়নের সময় কেবল প্রকাশিত একাডেমিক সাহিত্য পড়ে, কখনও জার্নালে না পৌঁছানো অপ্রকাশিত নেতিবাচক পরীক্ষা ও অভ্যন্তরীণ মূল্যায়ন মিস করে। "কী কাজ করে"-র ফলে-পাওয়া চিত্র পদ্ধতিগতভাবে ইতিবাচকের দিকে বাঁকা, এবং তার ওপর গড়া সিদ্ধান্ত কেউ সুচিন্তিতভাবে বাছেনি এমন সেই বাঁক উত্তরাধিকারসূত্রে পায়।

পরিপক্বতা মডেল

চেকলিস্ট

• একক গবেষণার ওপর নির্ভরের আগে পদ্ধতিগত পর্যালোচনা বা কী-কাজ-করে রেটিং যাচাই করা হয়েছে।
• কেবল সারাংশ রেটিং বা আইকন নয়, অন্তর্নিহিত প্রমাণ-পর্যালোচনা পড়া হয়েছে।
• প্রমাণের মান ও সুপারিশের শক্তি দুটি পৃথক বিচার হিসেবে বিবৃত।
• "প্রভাবের কোনো প্রমাণ নেই" বনাম "প্রভাব নেই-র প্রমাণ" লিখিত সংক্ষিপ্তসারে স্পষ্টভাবে আলাদা করা হয়েছে।
• পর্যালোচিত গবেষণা ও হাতের সিদ্ধান্তের মধ্যে প্রেক্ষাপটের মিল (জনগোষ্ঠী, মাপ, সেবা-ব্যবস্থা) যাচাই করা হয়েছে।
• একটি পূর্ণ পর্যালোচনা সময়সীমায় না মানালে দ্রুত প্রমাণ মূল্যায়ন প্রক্রিয়া পাওয়া যায় এবং ব্যবহৃত হয়।
• ফল পর্যালোচনার আগে সিদ্ধান্তের জন্য প্রমাণ-সীমা সম্মত হয়েছে।
• ফল যা-ই হোক এই প্রতিষ্ঠানের নিজস্ব মূল্যায়ন প্রকাশের পরিকল্পনা আছে।
• চাপের মধ্যে শূন্য থেকে গড়ার বদলে একটি প্রাসঙ্গিক কী-কাজ-করে কেন্দ্র বা ক্লিয়ারিংহাউসের সঙ্গে স্থায়ী সম্পর্ক প্রতিষ্ঠিত।
• চূড়ান্ত বিচারের পেছনের যুক্তি নথিভুক্ত, বিবেচিত ও প্রত্যাখ্যাত প্রমাণসহ।
• সিদ্ধান্ত কেবল প্রমাণের শক্তি নয়, মূল্য-প্রস্তাব ও বৈধতা বিবেচনার বিপরীতে পর্যালোচিত।

মূল উৎস

• Cochrane দ্বারা রক্ষিত The Cochrane Handbook for Systematic Reviews of Interventions, ক্ষেত্র জুড়ে পদ্ধতিগত পর্যালোচনা চর্চা যে মৌলিক পদ্ধতির ওপর গড়া তার জন্য।
• সামাজিক, আচরণগত ও অপরাধতাত্ত্বিক নীতির জন্য পদ্ধতিগত পর্যালোচনা ও প্রমাণ সংশ্লেষণ নিয়ে Campbell Collaboration-এর নির্দেশনা, স্বাস্থ্যের বাইরে সরকারি নীতি-ক্ষেত্রে সেই পদ্ধতির সরাসরি সম্প্রসারণের জন্য।
• What Works Clearinghouse-এর Standards Handbook (Institute of Education Sciences, যুক্তরাষ্ট্র), একটি জাতীয় ক্লিয়ারিংহাউস কীভাবে সুস্পষ্ট গবেষণা-নকশা মান স্থির করে এবং তার বিপরীতে প্রমাণ রেটিং দেয় তার একটি ব্যবহারিক উদাহরণের জন্য।
• Education Endowment Foundation-এর Teaching and Learning Toolkit, একত্রিত প্রমাণকে তুলনীয় ব্যয়, প্রভাব ও প্রমাণ-শক্তি রেটিংয়ে অনুবাদ করার একটি ব্যবহারিক, চর্চাকারী-মুখী উদাহরণের জন্য।
• Organisation for Economic Co-operation and Development (OECD)-এর প্রমাণ-অবহিত নীতি-প্রণয়নের সামর্থ্য গঠনের কাজ, সরকার কীভাবে প্রমাণ ব্যবহারের চাহিদা ও সরবরাহ-দিক সংগঠিত করে তার আন্তঃদেশীয় বিবরণের জন্য।
• College of Policing-এর What Works Center for Crime Reduction এবং এর অপরাধ-হ্রাস টুলকিট, স্বাস্থ্য ও শিক্ষার বাইরে প্রয়োগ করা ক্লিয়ারিংহাউস প্যাটার্নের আরও একটি ব্যবহারিক উদাহরণের জন্য।

তথ্যসূত্র

1. Systematic review — Wikipedia — https://en.wikipedia.org/wiki/Systematic_review
2. Meta-analysis — Wikipedia — https://en.wikipedia.org/wiki/Meta-analysis
3. Evidence-based policy — Wikipedia — https://en.wikipedia.org/wiki/Evidence-based_policy
4. Cochrane (organisation) — Wikipedia — https://en.wikipedia.org/wiki/Cochrane_(organisation)
5. Campbell Collaboration — Wikipedia — https://en.wikipedia.org/wiki/Campbell_Collaboration
6. What Works Clearinghouse — Wikipedia — https://en.wikipedia.org/wiki/What_Works_Clearinghouse
7. Education Endowment Foundation — Wikipedia — https://en.wikipedia.org/wiki/Education_Endowment_Foundation
8. Publication bias — Wikipedia — https://en.wikipedia.org/wiki/Publication_bias
9. Randomized controlled trial — Wikipedia — https://en.wikipedia.org/wiki/Randomized_controlled_trial
10. Evidence of absence — Wikipedia — https://en.wikipedia.org/wiki/Evidence_of_absence
11. Hierarchy of evidence — Wikipedia — https://en.wikipedia.org/wiki/Hierarchy_of_evidence
12. GRADE approach — Wikipedia — https://en.wikipedia.org/wiki/GRADE_approach
13. Cochrane Handbook for Systematic Reviews of Interventions — Cochrane — https://www.cochrane.org/authors/handbooks-and-manuals/handbook/current
14. Campbell Collaboration — Campbell Collaboration — https://www.campbellcollaboration.org/
15. What Works Clearinghouse Standards Handbook — Institute of Education Sciences, U.S. Department of Education — https://ies.ed.gov/ncee/wwc/Handbooks
16. Teaching and Learning Toolkit — Education Endowment Foundation — https://educationendowmentfoundation.org.uk/education-evidence/teaching-learning-toolkit
17. Building Capacity for Evidence-Informed Policy-Making — OECD — https://www.oecd.org/en/publications/building-capacity-for-evidence-informed-policy-making_86331250-en.html
18. What Works Center for Crime Reduction — College of Policing — https://www.college.police.uk/research/what-works-center-crime-reduction