مائیکل کریمر کا معاشیات تک رسائی

Timothy Ogden

مائیکل کریمر کو حال ہی میں ورلڈ بینک کا نیا چیف اکانومسٹ نامزد کیا گیا ہے۔ اس موقع پر، ہم اس کے اور ٹموتھی اوگڈن کے درمیان اس گفتگو کو دوبارہ چلا رہے ہیں جس میں کریمر نے معاشیات کے بارے میں اپنے نقطہ نظر پر بحث کی ہے، اس سے پہلے ٹموتھی کی طرف سے اس بات پر غور کیا گیا ہے کہ اصل گفتگو کے بعد سے دہائی میں ترقی میں کیا تبدیلی آئی ہے۔

ٹم: یہاں پر دوبارہ شائع ہونے والا انٹرویو بات چیت کے سلسلے کا ایک ترمیم شدہ ورژن ہے جو 2014 کے آخر میں شروع ہوا اور 2015 تک جاری رہا۔ وہ تمام گفتگو نوبل انعام سے بہت پہلے کی تھی (ہاں، ہاں، میں جانتا ہوں)، یو ایس ایڈ، ڈی ایف آئی ڈی اور زیادہ تر آفیشل ڈویلپمنٹ اسسٹنس ورلڈ کی حوصلہ افزائی، اور یقیناً، ای کون کے چیف مقرر کیے جانے سے پہلے دنیا میں بہت کم سمجھا جاتا تھا۔ بینک شاید ایک دہائی سے زیادہ عرصے بعد اس انٹرویو کو دوبارہ پڑھنے کا سب سے پریشان کن حصہ یہ ہے کہ مائیکل نے بنیادی ڈھانچے کی تعمیر پر کتنی اہمیت رکھی ہے جو پالیسی میں شواہد کے استعمال کی اجازت دے گا، جب اس انفراسٹرکچر کا اتنا بڑا حصہ تباہ ہو چکا ہے یا اسے انتہائی غیر یقینی مستقبل کا سامنا ہے۔

میرے لیے اب یہ ناممکن ہے کہ میں اس انٹرویو اور بین الاقوامی ترقیاتی امداد اور بنیادی ڈھانچے کی موجودہ حالت کو کریمر کے O-Ring تھیوری کی عینک سے نہ دیکھوں۔ آپ ناقدین کے خلاف RCTs کے مائیکل کے دفاع کو پڑھ سکتے ہیں کیونکہ ترقی کے عمل میں ہر شگاف اور رکاوٹ کی بڑی محنت کے ساتھ چھان بین کرنے کی ضرورت ہے اور اس بات کا اندازہ لگا سکتے ہیں کہ آیا اس یا اس رکاوٹ کو دور کرنے سے نتائج سامنے آئیں گے۔ لیکن اب ہم یہ بھی دیکھ سکتے ہیں کہ تعمیر اور ترقی میں ثبوت کو لاگو کرنے کی پیداواری زنجیریں کتنی نازک نکلی!

ایک دہائی پہلے میں شاید موجودہ صورتحال کی ستم ظریفی کے مقابلے میں زیادہ محظوظ ہوا ہوتا: انٹرویو کا سیاق و سباق (اور مجموعی طور پر کتاب) ماہرین اقتصادیات، این جی اوز اور فنڈرز کا ایک "اپ اسٹارٹ" گروپ تھا جو ورلڈ بینک (دوسروں کے درمیان) کے خلاف آرتھوڈوکس کا مرکز تھا جس میں میکرو اکنامک کے بارے میں فکرمندی اور قابل عمل تعلیمات کو عملی جامہ پہنانے کے قابل سمجھا جاتا تھا۔ صحیح سطح پر، بیڈ نیٹ کی فراہمی، یا غریب ترین افراد کو نقد رقم کی منتقلی۔ یہ کام کیا! AMCs، GiveDirectly، GiveWell، Deworm the World سبھی کو ان اپ سٹارٹس کے کام سے جوڑا جا سکتا ہے۔ اب جیسا کہ ہم صنعتی اور توانائی کی پالیسی کی عالمی ترقی کے ایجنڈوں میں سرفہرست واپسی کو دیکھتے ہیں، ان سابقہ "اپ اسٹارٹس" میں سے ایک چیف اکانومسٹ کا عہدہ سنبھال رہا ہے۔

پھر بھی، میرا دوبارہ پڑھنے سے مجھے کچھ امید ملتی ہے۔ ترقیاتی پالیسی کے اہم خدشات جو مائیکل انٹرویو میں بیان کرتے ہیں — ثبوت کی اہمیت، صحیح مراعات حاصل کرنا، جدت طرازی، اداروں کی تعمیر، پیمانے کے لیے جگہ پیدا کرنا جبکہ اس پیمانے کے اپنے منفرد چیلنجز ہیں — اب شاید ہی زیادہ اہم ہوں گے۔ غیر یقینی نئے چیلنجوں کا مقابلہ کرنے کی ضرورت ہے جب کہ پرانے چیلنجز ضد میں رہتے ہیں (ترقی کے باوجود)، تھیوری اور شواہد کو یکجا کرنے کی صلاحیت، طویل مدتی اور دوسرے اور تیسرے درجے کے اثرات کے بارے میں سوچتے ہوئے وسائل کی تقسیم پر فیصلے کا اطلاق کرنا، اس کے بارے میں حقیقت پسند ہونا کہ کیا تبدیل کیا جا سکتا ہے جبکہ اس کے بارے میں مہتواکانکشی ہونے کے باوجود کیا تبدیلی کی ضرورت ہے، ان سب کی سخت ضرورت ہے۔ مائیکل کریمر ایک طویل عرصے سے ان کے بارے میں سوچ رہے ہیں، اور ان کے بارے میں کچھ کر رہے ہیں۔

مندرجہ ذیل اصل میں ایم آئی ٹی پریس کے ذریعہ 2017 میں شائع ہونے والی تجرباتی گفتگو میں شائع ہوا۔ 1


ٹم: جب آپ نے کینیا میں بے ترتیب تشخیص کرنا شروع کیا تو آپ کے ذہن میں کیا تھا؟ آپ بے ترتیب ہونے کے بارے میں کیوں سوچ رہے تھے اور آپ کے خیال میں اس وقت اس کا کیا اثر پڑے گا؟

مائیکل: 1990 کی دہائی کے اوائل میں، تعلیمی ماہرین معاشیات اس مسئلے پر زیادہ توجہ دے رہے تھے کہ قابل اعتماد معاشی شناخت کیسے حاصل کی جائے۔ دوسرے لفظوں میں، کسی مخصوص پالیسی یا عنصر کے کارآمد اثرات کو ممکنہ الجھنے والے عوامل سے کیسے الگ کیا جائے۔ مثال کے طور پر، محققین آلہ کار متغیر کی تکنیک استعمال کر رہے تھے۔

میں کینیا میں دیہی کمیونٹی میں چھٹیوں پر گیا تھا جہاں میں نے کالج کے بعد ہائی اسکول میں رہائش اختیار کی تھی اور پڑھایا تھا اور میں اپنے ایک کینیا دوست پال لیپیاہ سے بات کر رہا تھا۔ اس نے ایک این جی او میں نوکری حاصل کر لی تھی اور مجھے بتایا کہ اسے بچوں کی کفالت کے نئے پروگرام کے لیے سات اسکولوں کا انتخاب کرنا ہے۔ میرے ذہن میں یہ آیا کہ شاید 14 اسکولوں کا انتخاب کرنا اور پروگرام کے کارآمد اثرات کا جائزہ لینے کے لیے ان میں بے ترتیب ہونا ممکن ہو گا۔ میرے دوست نے یہ خیال اپنے باس [چِپ بیری آف انٹرنیشنل چائلڈ سپورٹ افریقہ] تک پہنچایا اور انہوں نے اس کے لیے جانے کا فیصلہ کیا۔ 2

اس ابتدائی کام کی بنیاد پر، مجھ پر یہ واضح ہو گیا کہ ترقی کے ماہرین اقتصادیات کے لیے بے ترتیبی کو ایک عملی ٹول بنایا جا سکتا ہے، اور یہ کہ محققین اور این جی اوز کے درمیان اشتراک مختلف طریقوں کی جانچ کرنا ممکن بنا سکتا ہے۔ رینڈمائزیشن صرف حکومت کی طرف سے مقرر کردہ تحقیقی سوالات کے ساتھ حکومتی پروگراموں کے بہت بڑے پیمانے پر، ملٹی ملین ڈالر کی تشخیص کے لیے نہیں تھی، بلکہ ماہرین تعلیم اور این جی اوز کے درمیان تعاون کے ذریعے لاگو کیا جا سکتا ہے۔ یہ نہ صرف بچوں کی کفالت کے پروگراموں پر بلکہ وسیع تر سوالات پر روشنی ڈال سکتا ہے۔ تعلیم کے اندر، مثال کے طور پر، یہ انسانی سرمائے کے حصول کے ڈرائیوروں پر روشنی ڈال سکتی ہے۔ مثال کے طور پر، اسکولوں میں وسائل کی کم سطح کے نتیجے میں ترقی پذیر ممالک میں سیکھنے کے کتنے ناقص نتائج تھے؟ کیا ہوگا اگر ہم اس حقیقت کو استعمال کریں کہ این جی اوز کچھ اسکولوں میں بڑی مقدار میں فنڈز ڈال رہی ہیں نہ کہ دوسروں کو، یہ سمجھنے کی کوشش کریں کہ آیا کم سیکھنے کی سطح ان پٹ کی کمی کی وجہ سے ہے، یا یہ اساتذہ کی تربیت، یا بچوں کی خراب صحت یا دیگر ممکنہ وجوہات کی وجہ سے ہے؟ یہ جلد ہی واضح ہو گیا کہ ترقیاتی معاشیات میں بہت سے اہم سوالات کا جواب اس طرح دیا جا سکتا ہے۔

زمین پر پروگراموں میں شامل ہونا اور بے ترتیب تشخیصات کا استعمال کرتے ہوئے اپنے ہاتھ باندھنا محققین کو انسانی رویے کی حقیقتوں کا سامنا کرنے پر مجبور کرتا ہے، چاہے وہ ہمارے ماڈلز کے مطابق نہ ہوں۔ یہ وقت کے ساتھ ساتھ بہتر ماڈلز کی ترقی کا باعث بن سکتا ہے۔ جب Ted Miguel اور میں نے ICS کے کیڑے مار پروگرام کا جائزہ لیا، تو ہم نے پایا کہ کیڑے مار دوا سے بہت زیادہ فائدہ ہوتا ہے – آخر کار مزدور قوت میں پیداواری صلاحیت میں اضافہ ہوتا ہے۔ 3 لیکن ان فوائد کے باوجود، کیڑے مار گولیوں کی مانگ میں تیزی سے کمی آئی جب این جی او نے لاگت میں حصہ داری کی معمولی ضرورت بھی عائد کی۔ RCTs کی ایک سیریز نے بعد میں قیمت کے ساتھ غیر شدید صحت کی ٹیکنالوجیز کی مانگ کی اعلیٰ حساسیت کی تصدیق کی۔ 4 شواہد کے اس جمع سے ہمیں صحت کی طلب کے اپنے نظریات کو بہتر بنانے میں مدد ملی، جس سے ظاہر ہوتا ہے کہ صحت میں سرمایہ کاری کے انسانی سرمائے کے نظریہ کو ایڈجسٹ کرنے کی ضرورت ہے۔ ترقی اور طرز عمل کی معاشیات میں RCTs کے درمیان بہت نتیجہ خیز تعامل رہا ہے۔ نتائج کے اس سلسلے نے پالیسی پر بھی اہم اثر ڈالا ہے۔ ورلڈ بینک صحت کے لیے صارف کی فیسوں کا ایک اہم وکیل رہا ہے، لیکن رویے کی معاشیات پر حالیہ عالمی ترقی کی رپورٹ نے ایک اہم تبدیلی کا اشارہ دیا، جس سے یہ نکتہ اٹھایا گیا کہ فیس ایک عقلی ماڈل کے تحت توقع سے زیادہ استعمال کو روک سکتی ہے۔ 5

ٹم: مجھے ان خیالات میں دلچسپی ہے جو آپ کے ارد گرد گردش کر رہے تھے جب آپ نے فیلڈ تجربات پر کام کرنا شروع کیا تھا۔ کیا یہ IV کی تنقید تھی اور بہتر شناخت کی تلاش تھی؟ کیا آپ Kahneman اور دوسروں کے لیبارٹری تجربات کے بارے میں سوچ رہے تھے؟ یا امریکہ میں بڑے پیمانے پر تجربات؟

مائیکل: 1994 میں جب میں نے کینیا میں کام شروع کیا تو میں لیبر اکنامکس اور پبلک فنانس میں بہتر شناخت کی تحریک سے بہت زیادہ متاثر ہوا، لیکن لیبارٹری کے تجربات سے نہیں۔ میں ان روایات کو آزاد کے طور پر دیکھتا ہوں، حالانکہ اب تجربہ گاہ کے تجربات اور فیلڈ تجرباتی روایات میں کچھ ہم آہنگی ہے۔ مثال کے طور پر، نوا اشرف کا کام دلچسپ طریقوں سے ہر ایک کے عناصر کو یکجا کرتا ہے۔

میں آلہ کار متغیرات کے ناقدین پر بھی رد عمل ظاہر نہیں کر رہا تھا۔ درحقیقت، میں سمجھتا ہوں کہ انسٹرومینٹل متغیرات پر کام کرنے والے اور RCTs پر کام کرنے والے ہم میں سے ایک ہی جذبے سے متاثر تھے، یہ تشویش کہ اس وقت معاشیات میں بہت سے تجرباتی کام ممکنہ طور پر الجھاؤ کا شکار تھے اور کافی مضبوط مفروضوں کی ضرورت تھی۔ یہ کہا جا رہا ہے، ایسا نہیں ہے کہ IV تمام مسائل کو ختم کر دیتا ہے، اور نہ ہی کوئی RCT۔ مجھے نہیں لگتا کہ کوئی بھی یہ سوچتا ہے کہ RCTs جادوئی ہیں، لیکن یہ کارآمد اثر حاصل کرنے کے لیے واقعی ایک مفید ٹول ہیں۔ لہذا میں یہ کہوں گا کہ میں اس طرح سے کارآمد اثر حاصل کرنے کی کوشش کر رہا تھا جو بہتر شناخت حاصل کرنے کے لئے معاشیات کے پیشے میں ایک وسیع تر تحریک کا حصہ تھا۔

میرا اصل جذبہ عملی تھا – حقیقی دنیا کے سوالات کے زیادہ قابل اعتماد جوابات حاصل کرنا۔ میں نے ہمیشہ بنیادی طور پر ان بنیادی سوالات میں دلچسپی لی ہے کہ کون سی پالیسیاں غربت کو دور کر سکتی ہیں اور میں نے محسوس کیا کہ RCTs ایک ایسا آلہ تھا جسے اس سوال کے جواب میں مدد کے لیے ڈھال لیا جا سکتا ہے۔ میں RCTs کو زیادہ لچکدار اور مفید ٹول بنانے کے لیے حوصلہ افزائی کرتا تھا۔

ٹم: آر سی ٹی موومنٹ، ایڈوانس مارکیٹ کمٹمنٹس، ڈی ورم دی ورلڈ، ڈویلپمنٹ انوویشن وینچرز، گلوبل انوویشن فنڈ میں آپ جن بہت سے کوششوں میں شامل رہے ہیں، ان میں سے کیا آپ کو سب سے زیادہ فخر ہے؟ آپ کے خیال میں اب سے 20 سال پیچھے دیکھ کر سب سے زیادہ کیا اثر پڑے گا؟

مائیکل: میں ان تمام اقدامات کو بہت قریب سے متعلق دیکھتا ہوں۔ ایڈوانس مارکیٹ کمٹمنٹس ترقی کے لیے جدت کو فروغ دینے کے نئے طریقے تلاش کرنے کے بارے میں ہیں۔ دیگر ترقی کے لیے جدت کے بارے میں بھی ہیں۔ یہ ظاہر کرنا کہ RCTs کیا جا سکتا ہے، اس کام کو کرنے کے طریقہ کار پر کام کرنا، دوسروں کو تکنیک کی تربیت دینا، دوسروں کے لیے اس کے لیے فنڈز اکٹھا کرنا، اور حکومتوں اور دوسروں کو اپنی پالیسیوں کو تیار کرنے میں نتائج کو استعمال کرنے میں مدد کرنا یہ سب ایک پیکج کا حصہ ہیں۔ بلاشبہ، DIV اور GIF نہ صرف RCTs بلکہ ترقی میں اختراعات کو وسیع پیمانے پر سپورٹ کرتے ہیں۔

لوگ اکثر عملی R&D کی بہت بڑی مقدار کو کم سمجھتے ہیں جو ترقی پذیر ممالک میں بے ترتیب تشخیصات کو چلانے کے لیے ممکن بنانے کے طریقے تلاش کرنے کے لیے گئے جو عملی اور اہم دونوں نظریاتی سوالات کے جوابات دیتے ہیں۔ US 6 میں فیلڈ تجربات $40 ملین ڈالر یا اس سے زیادہ کے بجٹ کے ساتھ کیے جا رہے تھے۔ اس طرح کے جائزے واضح طور پر بہت اہم ہو سکتے ہیں، جیسا کہ PROGRESA 7 کی مثال ظاہر کرتی ہے۔ 8 اور ویسے، جہاں تک میں جانتا ہوں، PROGRESA، اگرچہ یہ اسی وقت چل رہا تھا جب میں ان پہلی بے ترتیب تشخیصات پر کام کر رہا تھا، یہ بھی ایک الگ چیز تھی۔ مجھے نہیں لگتا کہ وہ جانتے تھے کہ میں کیا کر رہا تھا اور مجھے نہیں لگتا کہ میں جانتا ہوں کہ وہ کیا کر رہے تھے۔ کینیا میں ICS کے ساتھ ابتدائی بے ترتیب تشخیصات بہت کم بجٹ پر کیے گئے تھے، اور ہمیں شروع سے کام کرنا تھا۔ ترقی پذیر ممالک میں چھوٹے بجٹ پر کام کرنے سے اس بارے میں بہت سی جدت آئی کہ محدود نمونوں سے طاقت کو کس طرح زیادہ سے زیادہ حاصل کیا جائے، نتائج کی پیمائش کیسے کی جائے، اور کیسے بے ترتیب کیا جائے۔ ایک اور فرق یہ ہے کہ ہم این جی اوز کے ساتھ کام کر رہے تھے، جیسا کہ امریکہ میں بڑے پیمانے پر حکومتی جائزوں کے برخلاف کیا جاتا ہے۔ یہ کینیا میں جہاں میں نے شروع کیا تھا، اور پھر کچھ سال بعد ہندوستان میں ابھیجیت کے ساتھ، دونوں میں یہ سچ تھا۔

این جی اوز کے ساتھ کام کرنے سے، حکومت کے بڑے جائزوں کے برخلاف، بہت سے وسیع تر سوالوں کے جواب دینے کی صلاحیت پیدا ہوئی، کیونکہ این جی اوز حکومتوں کے مقابلے زیادہ فرتیلا ہیں اور وہ مختلف چیزیں آزمانے کے عادی ہیں۔ وہ ہر ایک کی خدمت کرنے کے قابل نہیں رہنے کے عادی ہیں، لہذا ان کے لیے یہ زیادہ فطری ہے کہ وہ مرحلہ وار ترتیب کو بے ترتیب بنانے کی کوشش کرنے کے لیے تیار ہوں۔ میں نے کینیا میں ICS کے ساتھ طویل مدتی شراکت قائم کرنے میں مدد کی، اور ابھیجیت اور میں نے سیوا مندر 9 کے ساتھ جو کام کیا وہ بھی طویل مدتی شراکت داری میں بدل گیا۔ ان شراکتوں کے اندر ہم تعلیم، صحت، خواتین کو بااختیار بنانے، زراعت تک ہر طرح کے مختلف نظریات کی جانچ کرنے کے قابل تھے۔ گریجویٹ طلباء آنے اور ان شراکتوں میں شامل ہونے اور نئے آئیڈیاز دریافت کرنے کے قابل تھے، اور وہ گریجویٹ طلباء جونیئر فیکلٹی اور پھر سینئر فیکلٹی بن گئے، میدان کو تبدیل کرتے ہوئے۔

مجھے اس بات کی بھی خوشی ہے کہ میں پالیسی سازوں کے ساتھ مل کر ان نتائج کو پالیسی سے آگاہ کرنے کے لیے استعمال کرنے میں کامیاب رہا ہوں۔ بعض اوقات اس میں مخصوص اختراعات کی پیمائش شامل ہوتی ہے—جیسے کیڑے مار دوا یا کلورین ڈسپنسر—اور بعض اوقات اس میں مزید عمومی اسباق تیار کرنا شامل ہوتا ہے، جیسے کہ روک تھام کرنے والی صحت کی مصنوعات کے استعمال پر قیمت کے اثرات یا بچوں کی موجودہ سیکھنے کی سطح سے مماثل تدریس کی اہمیت۔

پیمانہ بنانے کے لیے ایک ٹن محنت درکار ہے۔ یہ کیڑے مارنے کے تجربے میں بہت واضح ہو گیا۔ ہم نے اپنے نتائج پالیسی سازوں کو پیش کیے اور مجھے لگتا ہے کہ وہ ان کے بارے میں بہت پرجوش تھے۔ لیکن وزارت تعلیم میں ایک مستقل سکریٹری کے پاس بہت سی چیزیں ہیں جن سے نمٹنے کے لیے، اس لیے مستقل مصروفیت اور تعاون کی ضرورت ہے۔ ڈی ورمنگ کے معاملے میں، مثال کے طور پر، ہم نے ایک این جی او، ڈی ورم دی ورلڈ کی مشترکہ بنیاد رکھی، تاکہ بڑے پیمانے پر اسکول پر مبنی کیڑے مار پروگرام متعارف کرانے کے لیے حکومتوں کو تکنیکی مدد فراہم کی جا سکے۔ این جی او کو شروع کرنے اور کینیا اور بہار میں کچھ بڑے پیمانے پر پروگرام شروع کرنے میں کافی کام کرنا پڑا۔ لیکن اب ایویڈینس ایکشن، جس نے دیورم دی ورلڈ کا کام سنبھالا ہے، کینیا، ایتھوپیا اور ہندوستان میں کامیابی کے ساتھ قومی پروگراموں کی حمایت کر رہا ہے۔ وہ صرف 2015 کی پہلی ششماہی میں 140 ملین بچوں تک پہنچ چکے ہیں۔

جراثیم کشی کو بڑھانے پر کام کرنے والے میرے تجربے سے، یہ واضح ہو گیا کہ RCTs سے نکلنے والے اسباق کو بڑھانے کے لیے مزید ادارہ جاتی تعاون کی ضرورت ہے۔ جب راج شاہ USAID ایڈمنسٹریٹر بنے اور مجھ سے اس میں شامل ہونے کو کہا تو میں نے اسے بتایا کہ میں اس پر کام کرنا چاہتا ہوں۔ وہ اس خیال سے بہت پرجوش ہوئے اور مجھے مشورہ دیا کہ میں ماورا او نیل کے ساتھ کام کروں، جن کا انٹرپرینیورشپ کا پس منظر ہے۔ ہم نے مل کر یو ایس ایڈ کے اندر ڈویلپمنٹ انوویشن وینچرز کی مشترکہ بنیاد رکھی تاکہ ترقی میں نئے آئیڈیاز کی ابتدائی مرحلے میں پائلٹنگ، ان آئیڈیاز کی سخت جانچ، اور جو سب سے زیادہ کامیاب ثابت ہوئے ان کی سکیلنگ کی مالی اعانت فراہم کی جا سکے۔ DIV نے دنیا بھر میں بہت سارے RCTs کی مالی اعانت فراہم کی ہے اور تنظیموں کو کام کرنے والوں کی پیمائش کرنے میں مدد کی ہے۔ یہ واقعی ترقیاتی امداد سے بالکل مختلف ماڈل ہے۔ بجائے اس کے کہ امدادی ایجنسیاں اوپر سے نیچے فیصلے کریں کہ کس چیز میں سرمایہ کاری کرنی ہے اور پھر وژن کو عملی جامہ پہنانے کے لیے تجاویز کی کال جاری کرنا، اس نقطہ نظر میں اختراعی آئیڈیاز کے لیے ایک کھلا کال شامل ہے، سخت جانچ کی حمایت کے لیے وسائل فراہم کرتا ہے، اور پھر مزید مدد کو نتائج پر مشروط بناتا ہے۔ DIV نقطہ نظر نے پیرو اور تمل ناڈو میں متعلقہ فنڈز کی تخلیق کو متاثر کیا ہے۔ ڈی ایف آئی ڈی کو اس میں دلچسپی تھی جو ہم کر رہے تھے، اور اسی لیے پچھلے کچھ سالوں میں میں ایک نئے بین الاقوامی منصوبے، گلوبل انوویشن فنڈ کے قیام میں شامل رہا ہوں، جسے امریکہ، برطانیہ، سویڈن، آسٹریلیا، اور اومیڈیار نیٹ ورک کی حمایت حاصل ہے۔ ہم نے اسے ابھی اس سال لانچ کیا، اور میں اس کے بارے میں بہت پرجوش ہوں۔

ترقیاتی معاشیات میں RCTs کے لیے جدید تحریک کو اکثر تشخیص کے زمرے میں رکھا جاتا ہے، لیکن درحقیقت یہ تحریک جدت کے ساتھ ساتھ تشخیص کے بارے میں بھی ہے۔ یہ زمینی کام کے ذریعے سیاق و سباق کے بارے میں سیکھنے کا ایک متحرک عمل ہے، مختلف طریقوں کو آزمانے، اچھی وجہ کی شناخت کے ساتھ اچھے اعداد و شمار کو جمع کرنا، یہ معلوم کرنا کہ نتائج پہلے سے تصور شدہ نظریاتی نظریات کے مطابق نہیں ہیں، ایک بہتر نظریاتی تفہیم پر کام کرنا جو زمینی حقائق کے مطابق ہو، اور نئے آئیڈیاز کی بنیاد پر نئے آئیڈیاز کی جانچ کرنا اور نئے نقطہ نظر کی جانچ کرنا۔ DIV اور GIF کا آئیڈیا جدت کے بارے میں بہت زیادہ ہے، لہذا اگر آپ کو اثر کا سختی سے جائزہ لینے کے لیے تیار ہونے سے پہلے اپنے آئیڈیا کو پائلٹ کرنے کے لیے مدد کی ضرورت ہو، تو DIV اور GIF دونوں اس کے لیے ادائیگی کریں گے۔ پھر وہ اثرات کی سخت تشخیص کے لیے ادائیگی کریں گے، اور اگر یہ کام کرتا ہے، تو وہ اگلے مرحلے پر بھی جاتے ہیں، جو جدت کو پیمانے پر منتقل کرنے میں مدد کرنے کی کوشش کر رہا ہے۔

لہذا میں دیکھ رہا ہوں کہ بے ترتیب تشخیصات کی جدید تحریک شروع ہوتی ہے، یہ ظاہر کرتے ہوئے کہ یہ ممکن ہیں، این جی اوز کے ساتھ کام کرنا، ڈی ورمنگ جیسے کامیاب ترقی کے طریقوں کو پیمانہ کرنے کی کوشش کرنا، فیسوں میں احتیاطی صحت کی دیکھ بھال کی حساسیت جیسے اسباق کو تیار کرنا، اور پھر ادارے بنانے کی کوشش کرنا ان چیزوں کو ایک پیکیج کے طور پر کرتے رہنا جس کے مجھے امید ہے کہ بہت زیادہ اثر پڑے گا۔

ٹم: وہاں تبدیلی کا ایک واضح نظریہ موجود ہے جس میں مسئلہ ثبوت پیدا کرنے اور استعمال کرنے کے لیے اداروں کی کمی ہے۔

مائیکل: میرے خیال میں یہ صحیح ہے۔ آپ بہت ساری چیزیں دیکھ سکتے ہیں جس پر میں نے ایک ادارہ جاتی فریم ورک بنانے کے طور پر کام کیا ہے تاکہ ترقی میں خیالات کو سختی سے جانچا جا سکے۔ یہاں تک کہ کینیا میں میرا ابتدائی کام لوگوں کو اعلیٰ معیار کے فیلڈ تجربات چلانے کی اجازت دینے کے لیے مقامی بنیادی ڈھانچے کی تعمیر کر رہا تھا — تربیت یافتہ شمار کنندگان سے لے کر ایسے نظام تک جو لوگ گرانٹ چلا سکتے ہیں۔ بہت سے دوسرے لوگوں نے بھی اس بنیادی ڈھانچے کو قائم کرنے میں مدد کی ہے اور دنیا نے پچھلے 20 سالوں میں ایک طویل سفر طے کیا ہے۔ وہاں J-PAL ہے، IPA ہے، 3ie ہے، ورلڈ بینک میں SIEF پروگرام ہے، DIME ہے، اس لیے زبردست پیشرفت ہوئی ہے۔

ٹم: "اداروں کی اہمیت" کی تنقید میں تھوڑی ستم ظریفی ہے کہ RCTs ان چیزوں پر توجہ دے رہے ہیں جو بہت چھوٹی ہیں، لیکن تحریک نے ادارے بنائے ہیں۔

مائیکل: RCTs کو ہر مسئلے کا جواب دینے کے لیے استعمال نہیں کیا جا سکتا، لیکن وہ بہت سے مسائل پر روشنی ڈال سکتے ہیں۔

جراثیم کشی ایک چھوٹا سا سوال لگ سکتا ہے لیکن کیڑے مار دوا کی تشخیص صحت اور تعلیم کے باہمی تعلق پر روشنی ڈالتی ہے، غیر شدید صحت کے لیے چھوٹی کاپیوں کے لیے لوگوں کی حساسیت، صحت سے متعلق معلومات کے لیے رویے کی ردعمل، اور سوشل نیٹ ورکس کے ذریعے معلومات کے بہاؤ پر روشنی ڈالتی ہے۔ اس نے خارجیوں کی پیمائش کے بارے میں طریقہ کار کے مسائل پر روشنی ڈالنے میں بھی مدد کی۔

سیاسی معیشت کے سوالات پر اب بہت سے اچھے آر سی ٹیز موجود ہیں۔ بین اولکن نے RCTs 10 کا استعمال کرتے ہوئے بدعنوانی پر بہت اچھا کام کیا ہے اور بیوروکریسیوں کو مزید جوابدہ بنانے پر بہت کام ہو رہا ہے۔ 11

تعلیم پر میرا کچھ کام جو ابتدائی طور پر درسی کتاب کے پروگرام کی تشخیص کے طور پر شروع ہوا تھا جو اداروں کے بارے میں تھا۔ جیسا کہ میں نے پہلے ذکر کیا ہے، بے ترتیب تشخیص کے بارے میں ایک عظیم چیز یہ ہے کہ یہ محققین کو زمین پر موجود چیزوں کی حقیقت سے بہت زیادہ رابطے میں رہنے پر مجبور کرتی ہے۔ ماہرین تعلیم صرف ترقی کے چیلنجوں کے بارے میں نظریہ سازی نہیں کر رہے ہیں۔ وہ اپنے ہاتھ گندے کر رہے ہیں. اکثر اس عمل میں انہیں احساس ہوتا ہے کہ ان کے نظریات غلط ہیں، اور وہ نئے نظریات کے ساتھ آتے ہیں۔ اور پھر جب آپ RCT کے ساتھ ان نظریات کی جانچ کرتے ہیں، تو آپ اکثر نتائج سے حیران رہ جاتے ہیں۔ آپ کے پہلے سے تصور شدہ خیالات کے مطابق آپ کے نتائج کو موافقت کرنے کی کوئی گنجائش نہیں ہے، یہ وہی ہے جو ہے. RCTs آپ کو حقیقت کا سامنا کرنے پر مجبور کرتے ہیں۔

میں نے کینیا کے ایک اسکول میں پڑھایا تھا، اور یہ دیکھ کر کہ اسکولوں کے کتنے کم وسائل ہیں، اس نے مجھے یہ سوچنے پر مجبور کیا کہ زیادہ وسائل، بشمول زیادہ نصابی کتب کا ہونا ضروری ہے۔ لیکن ہم نے پایا کہ نصابی کتابوں نے صرف ان لوگوں کے لیے ٹیسٹ کے اسکور کو بہتر کیا ہے جو پہلے سے اچھی کارکردگی کا مظاہرہ کر رہے تھے۔ اس نے مجھے نصاب کے درمیان فٹ ہونے کے مسائل کے بارے میں سوچنے پر مجبور کیا اور اس وقت طلباء کہاں ہیں۔

نصابی کتابیں بہت سے طلباء کی سطح سے بہت دور لکھی گئیں۔ تعلیم میں RCTs سے ایک بڑا سبق یہ ہے کہ نصاب کہاں ہے اور کہاں تدریس پر مبنی ہے اور عام طالب علم کہاں ہے۔ اس کی ادارہ جاتی وجوہات ہیں۔ اس کی سیاسی اقتصادی وجوہات ہیں۔ میرے خیال میں بے ترتیب تشخیصات کی وجہ سے ہم تعلیم کے اہم ادارہ جاتی مسائل میں سے ایک کے بارے میں بہت کچھ سمجھتے ہیں۔ اس صورت میں اس کا آغاز عدم مماثلت کی ادارہ جاتی وجوہات کے تجزیہ سے نہیں ہوا، لیکن اعداد و شمار ہمیں اس تک لے آئے۔

اس مسئلے کو حل کرنے کے لیے ہم نے بہت سے مفید مداخلتوں کی نشاندہی کی ہے، جیسے کہ اصلاحی تعلیم، لیکن ان مداخلتوں کو نافذ کرنا ایک بڑا سیاسی اقتصادی مسئلہ ہے۔ یہ اس مسئلے کو حل کرنے میں مدد کے لیے مفید پالیسیاں ہیں، لیکن ہمیں شاید نصابی اصلاحات کی بھی ضرورت ہے، اور یہ ایک مشکل کام ہے۔ لیکن اس کی کوئی وجہ نہیں ہے کہ اگر ہم نصابی اصلاحات کرتے ہیں، تو ہم بے ترتیب تشخیص کے ساتھ اس کے اثرات کو نہیں سمجھ سکتے۔

RCTs کی کچھ دوسری تنقیدیں، مثال کے طور پر، اس بارے میں کہ آیا ایک سیاق و سباق کے نتائج دوسروں کے لیے عام ہوں گے، تجرباتی کام کے بارے میں عمومی نکات ہیں، بے ترتیب تشخیص کے بارے میں نہیں۔

ٹم: میں AMCs کے مسئلے پر واپس جانا چاہتا ہوں جسے ہم نے اس بحث کے آغاز میں ایک طرف رکھا تھا۔ ایک معقول دلیل ہے کہ AMCs ویکسین کی تعداد میں اضافہ کرتی ہیں اور GAVI کے ساتھ مل کر بہت زیادہ بچوں کو ٹیکے لگواتے ہیں — اور یہ کہ ترقی میں ہونے والی سب سے اہم چیزوں میں سے ایک بچوں کے ایک گروپ کو جسمانی یا علمی طور پر مرنے یا مستقل طور پر معذور ہونے سے بچانا ہے۔ آپ ثبوت پیدا کرنے کے لیے اداروں کی تعمیر کے ممکنہ اثرات کا موازنہ کیسے کریں گے، بمقابلہ "ہم نے بچوں کا ایک گروپ بچایا"؟

مائیکل: ترقی یافتہ دنیا کے لیے صحت کی مصنوعات پر R&D کی حوصلہ افزائی کرنے والے اداروں میں نجی شعبے کے R&D کی حوصلہ افزائی کے لیے پبلک بائیو میڈیکل ریسرچ فنڈنگ اور دانشورانہ املاک کے حقوق دونوں شامل ہیں۔ AMCs کا خیال R&D کی حوصلہ افزائی کے لیے ہمارے پاس دستیاب ٹولز کے سیٹ کو بڑھانا تھا۔ دانشورانہ املاک کے حقوق کے نظام R&D کی ترغیبات تخلیق کرتے ہیں لیکن اس میں کچھ جامد تحریفات بھی شامل ہوتے ہیں، اور یہ کافی مہنگے ہو سکتے ہیں۔ کچھ متحرک بگاڑ بھی ہو سکتا ہے۔ میں نے پیٹنٹ خریدنے کے خیال پر ایک مقالہ لکھا تھا — فرمیں رضاکارانہ طور پر اپنے پیٹنٹ حکومتوں کو بیچ سکتی ہیں، جو انہیں عوامی ڈومین میں رکھ سکتی ہیں۔ 12 جو املاک دانشورانہ حقوق کے ذریعے تخلیق کردہ متحرک R&D مراعات کو محفوظ رکھتا ہے لیکن املاک دانش کے حقوق سے وابستہ کچھ جامد تحریفات سے بچتا ہے، نیز کچھ متحرک تحریفات، جیسے کہ صرف پیٹنٹ حاصل کرنے کے لیے "می ٹو" دوائیں تیار کرنے کی ترغیب، اور منشیات کی پیروی کرنے کے لیے حوصلہ شکنی۔

ویکسین کے لیے AMCs میں پیٹنٹ خریدنے جیسی بہت سی خصوصیات ہیں، لیکن ایسا لگتا ہے کہ وہ ادارہ جاتی اور سیاسی طور پر آسان ہیں۔ 13 اکیڈمک آئیڈیا سے کسی ایسی چیز کی طرف جانے کے لیے بہت زیادہ کام تھا جسے پالیسی میں لاگو کیا جا سکتا تھا۔ 14 یہ بہت اچھا تھا جو نیوموکوکس ویکسین کے لیے کیا گیا تھا، اور پھر وہ ویکسین تیار کی گئی۔

میرے خیال میں AMCs کا سب سے بڑا ممکنہ فائدہ ان بیماریوں کے لیے R&D کی حوصلہ افزائی کرنا ہے جو کچھ زیادہ دور ہیں۔ نیوموکوکس کے معاملے میں، ان تناؤ کے لیے پہلے سے ہی ایک ویکسین موجود تھی جو امیر دنیا میں عام تھی، لیکن ایسی کوئی ویکسین نہیں تھی جس میں ان تمام تناؤ کا احاطہ کیا گیا ہو جو بہت سے غریب ممالک سے متعلق ہوں۔ یہ ایک تکنیکی چیلنج تھا جسے میں کم نہیں کرنا چاہتا، لیکن یہ ایک مکمل طور پر نئی ویکسین تیار کرنے سے کہیں کم تکنیکی چیلنج تھا۔ میں نے اس پر کچھ عرصہ سے وقت نہیں گزارا، حالانکہ میں ابھی ویکسین اور ادویات پر ایک تعلیمی مقالہ لکھ رہا ہوں۔ لیکن، عمومی طور پر، میں سمجھتا ہوں کہ R&D کی حوصلہ افزائی اور مصنوعات کو قابل رسائی بنانے کے لیے نئے میکانزم کے ساتھ ادارہ جاتی اختراع کی گنجائش موجود ہے۔ مجھے امید ہے کہ میں کسی وقت اس پر کچھ کام کرنے کے لیے واپس جاؤں گا۔

ٹم: کیا آپ بالواسطہ یا بالواسطہ تربیت میں اپنے کردار کے بارے میں سوچتے ہیں کہ بے ترتیب تشخیص کرنے میں بہت سے لوگ شامل ہیں؟ آپ کو کچھ انتہائی شائستہ باتیں کہنے پر مجبور کرنے کے خطرے میں، مائیکل کریمر کے بغیر دنیا کا کیا جواب ہے؟

مائیکل: سالوں کے دوران کچھ حیرت انگیز گریجویٹ طلباء اور شریک مصنفین کے ساتھ کام کرنا بہت اچھا رہا، جن میں سے بہت سے اب ناقابل یقین چیزیں کر رہے ہیں۔ بسیا میں ICS میں آپریشن کے قیام کے بارے میں ایک بڑی چیز ان ناقابل یقین حد تک باصلاحیت لوگوں کو دیکھنا ہے جو اعلیٰ درجے کے اداروں میں تربیت حاصل کر رہے ہیں اور اس تربیت کو کینیا میں زندگی کے ساتھ آمنے سامنے لا رہے ہیں اور شاندار خیالات پیدا کر رہے ہیں۔

میں سمجھتا ہوں کہ یہ طلباء کے لیے بہت قیمتی تھا، لیکن یہ دنیا کے لیے بھی قابل قدر ہے کیونکہ ان میں سے بہت سے طلباء نے عظیم کام کیے ہیں۔ میں اس کے بارے میں بہت خوش ہوں۔

ٹم: فیلڈ تجرباتی تحریک کے اثرات کا ایک ورژن یہ ہے کہ ہم نے ایک ایسی صورت حال سے منتقلی کی ہے کہ، عام طور پر، سنجیدہ ماہرین اقتصادیات اس میدان میں نہیں جاتے تھے جہاں وہ کرتے تھے۔ کیا یہ آپ کے ساتھ گونجتا ہے؟

مائیکل: دنیا کو ہر طرح کی تحقیق کی ضرورت ہے۔

ہمیں فیلڈ ریسرچرز، تھیوریسٹ، میکرو اکنامسٹ کی ضرورت ہے۔ معاشی تاریخ میں شاندار کام ہو رہا ہے۔ میرے خیال میں فیلڈ میں وقت گزارنے اور بے ترتیب آزمائشوں اور دیگر فیلڈ ورک میں شامل ہونے کا خیال بہت اچھا ہے، اور یہ تکنیکوں اور ٹولز کا ایک بہت اہم مجموعہ ہے۔ میں دوسرے طریقوں کے لئے بھی کھلا ہوں۔ میں سمجھتا ہوں کہ، عمومی طور پر، ترقی پذیر ممالک میں رہنے اور کام کرنے میں وقت گزارنا ترقیاتی ماہرین اقتصادیات کے لیے اچھا ہے، لیکن اس کا یہ مطلب نہیں ہے کہ ہر منصوبہ فیلڈ ورک پر مبنی ہونا چاہیے۔

ٹموتھی اوگڈن فنانشل ایکسیس انیشی ایٹو کے منیجنگ ڈائریکٹر ہیں، یہ ایک تحقیقی اقدام ہے کہ کس طرح مالیاتی خدمات بہتر طریقے سے ضروریات کو پورا کر سکتی ہیں اور غریب گھرانوں کی زندگیوں کو بہتر بنا سکتی ہیں۔ وہ تجرباتی گفتگو کے مصنف ہیں، معاشی ماہرین کے انٹرویوز کا مجموعہ جو غربت کے خاتمے کے لیے فیلڈ تجربات کر رہے ہیں۔ وہ GiveWell کے بورڈ میں بھی کام کرتے ہیں اور Aspen Institute کے اقتصادی مواقع پروگرام کے سینئر فیلو ہیں۔

اگر آپ کے اس مضمون پر تبصرے ہیں، یا بحث میں حصہ ڈالنا چاہتے ہیں، تو براہ کرم انہیں letters@indevelopmentmag.com پر ای میل کریں۔ جوابات خطوط کے حصے میں دکھائے جائیں گے۔

  1. خاص طور پر: اوگڈن، ٹموتھی این، تجرباتی گفتگو: ترقیاتی معاشیات میں بے ترتیب آزمائشوں پر تناظر، © 2017 میساچوسٹس انسٹی ٹیوٹ آف ٹیکنالوجی، ایم آئی ٹی پریس کی اجازت سے۔ ↩︎
  2. یہ گلووی، پال، مائیکل کریمر، اور سلوی مولن کے طور پر شائع ہوا تھا۔ "بہت سے بچے پیچھے رہ گئے؟ کینیا میں نصابی کتابیں اور ٹیسٹ کے اسکور۔" امریکن اکنامک جرنل: اپلائیڈ اکنامکس 1 (1) (2009): 112–35۔ doi:10.1257/app.1.1.112.. اگرچہ یہ کام RCT تحریک کے آغاز میں اہم تھا، لیکن یہ مقالہ سرکاری طور پر 2009 تک شائع نہیں ہوا تھا، اس کے بعد بہت سے دوسرے بااثر RCT پیپرز شائع ہوئے۔ ↩︎
  3. میگوئل، ایڈورڈ، اور مائیکل کریمر۔ "کیڑے: علاج کے خارجیوں کی موجودگی میں تعلیم اور صحت پر اثرات کی نشاندہی کرنا۔" Econometrica 72 (1) (2004): 159–217۔ doi:10.1111/j.1468-0262.2004.00481.x ↩︎
  4. Pascaline Dupas اس کام کے زیادہ تر حصے میں شامل رہی ہے، اور اس میں سے کچھ تجرباتی گفتگو میں ان کے انٹرویو میں زیر بحث آئی ہیں۔ J-PAL کے پاس اس موضوع کا ایک جائزہ ہے جس میں بہت سے کاغذات کے لنکس یہاں موجود ہیں۔ ↩︎
  5. خاص طور پر باب 8 دیکھیں: "صحت۔" ورلڈ ڈویلپمنٹ رپورٹ 2015 میں: دماغ، معاشرہ اور برتاؤ۔ واشنگٹن، ڈی سی: ورلڈ بینک، 2015۔ ↩︎
  6. وفاقی پروگراموں کے ان امریکی فیلڈ تجربات پر تجرباتی گفتگو میں جوڈی گیرون کے ساتھ انٹرویو میں تبادلہ خیال کیا گیا ہے۔ ↩︎
  7. PROGRESA معقول طور پر جدید مشروط نقد منتقلی کے پروگراموں کا پیش خیمہ ہے، جو سماجی بہبود کی ادائیگیاں وصول کنندگان کے لیے مشروط طور پر فراہم کرتے ہیں جیسے کہ اپنے بچوں کو اسکول میں رکھنا یا ٹیکے لگوانا۔ PROGRESA کا اندازہ بے ترتیب ٹرائل کا استعمال کرتے ہوئے کیا گیا جس نے کئی سالوں کے دوران پروگرام کو شروع کرنے کی ضرورت کا فائدہ اٹھایا اور دلچسپی کے بہت سے اقدامات پر نمایاں اثر پایا۔ PROGRESA کی کامیابی نے دنیا کے بہت سے ممالک میں CCT پروگراموں کو اپنانے کی ترغیب دی۔ ↩︎
  8. PROGRESA پروگرام اور اس کے اثرات کے جائزہ کے لیے، دیکھیں: Skoufias، Emmanuel، اور Bonnie McClafferty۔ "کیا PROGRESA کام کر رہا ہے؟ IFPRI کی طرف سے تشخیص کے نتائج کا خلاصہ۔" FCND ڈسکشن پیپر 118۔ واشنگٹن، ڈی سی، 2001۔ http://ebrary.ifpri.org/cdm/ref/collection/p15738coll2/id/77118۔ ↩︎
  9. سیوا مندر راجستھان، بھارت میں واقع ایک این جی او ہے۔ یہ ابتدائی تعلیم کے RCTs کے ساتھ ساتھ حفاظتی ٹیکوں کے فروغ کے تجربے میں بھی شامل تھا ( جس پر تجرباتی گفتگو میں ایستھر ڈوفلو اور ابھیجیت بنرجی کے ساتھ انٹرویو میں تبادلہ خیال کیا گیا)۔ ↩︎
  10. اس میں انڈونیشیا میں ٹرک ڈرائیوروں سے بھتہ خوری اور سڑک کی تعمیر میں بدعنوانی اور بدعنوانی اور حقیقی بدعنوانی کے تصورات کے درمیان فرق پر کام شامل ہے۔ ایک جائزہ کے لیے، Olken and Pande دیکھیں، "ترقی پذیر ممالک میں بدعنوانی" اقتصادیات کا سالانہ جائزہ (2012)، Olken، Benjamin A.، اور Patrick Barron۔ "بھتہ خوری کی سادہ معاشیات: آچے میں ٹرکنگ سے ثبوت۔" جرنل آف پولیٹیکل اکانومی 117 (3) (2009): 417–52۔ doi: 10.1086/599707, Olken, Benjamin A. "مانیٹرنگ بدعنوانی: انڈونیشیا میں فیلڈ تجربے سے ثبوت۔" جرنل آف پولیٹیکل اکانومی 115 (2) (2007): 200–49۔ doi: 10.1086/517935۔ ↩︎
  11. مثال کے طور پر، بنرجی وغیرہ کا راجستھان پولیس کے ساتھ کام، اور ہندوستان میں ٹیکس جمع کرنے والوں کے لیے کارکردگی کی ادائیگی پر اولکن کا کام دیکھیں۔ ↩︎
  12. کریمر، مائیکل۔ "پیٹنٹ خریدنا: اختراع کی حوصلہ افزائی کے لیے ایک طریقہ کار۔" سہ ماہی جرنل آف اکنامکس 113 (4) (1998): 1137–67۔ doi:10.1162/003355398555865۔ ↩︎
  13. کریمر، مائیکل، اور ریچل گلینرسٹر۔ مضبوط دوا: نظر انداز شدہ بیماریوں پر دواسازی کی تحقیق کے لیے ترغیبات پیدا کرنا۔ پرنسٹن: پرنسٹن یونیورسٹی پریس، 2004۔ ↩︎
  14. اس میں نہ صرف معاشیات کے اصل مقالے شامل تھے بلکہ ایک کتاب ( Strong Medicine ) اور سنٹر فار گلوبل ڈویلپمنٹ میں ایک ورکنگ گروپ شامل تھا اس سے پہلے کہ ایک تنظیم بنائی جائے اور AMCs کے انتظام کے لیے فنڈز فراہم کیے جائیں۔ دیکھیں: لیون، روتھ، مائیکل کریمر، اور ایلس البرائٹ۔ ویکسینز کے لیے بازار بنانا: آئیڈیاز ٹو ایکشن۔ واشنگٹن، ڈی سی: مرکز برائے عالمی ترقی، 2005۔ ↩︎