Недавно Майкл Кремер был назначен новым главным экономистом Всемирного банка. По этому случаю мы повторно публикуем его беседу с Тимоти Огденом, в которой Кремер обсуждает свой подход к экономике, а Тимоти предваряет ее размышлениями о том, что изменилось в сфере развития за десятилетие, прошедшее с момента первой беседы.
Подход Майкла Кремера к экономике
Тим: Приведённое здесь интервью — это отредактированная версия серии бесед, начавшихся в конце 2014 года и продолжавшихся до 2015 года. Все эти беседы состоялись задолго до Нобелевской премии (да-да, я знаю), ликвидации USAID, DFID и большей части официального мира помощи развитию, и, конечно же, до того, как Кремера могли бы рассматривать на должность, не говоря уже о назначении, главным экономистом Всемирного банка. Возможно, самое поразительное в перечитывании этого интервью спустя более чем десять лет — это то, насколько большое значение Майкл придавал созданию инфраструктуры, которая позволила бы использовать фактические данные в политике, когда большая часть этой инфраструктуры сейчас разрушена или находится под угрозой срыва.
Сейчас мне невозможно не рассматривать это интервью и текущее состояние международной помощи развитию и инфраструктуры через призму теории «О-кольца» Кремера. Можно понять защиту Майклом рандомизированных контролируемых исследований от критиков, исходя из необходимости тщательного изучения каждой трещины и узкого места в процессе развития и оценки того, приведет ли устранение того или иного ограничения к результатам. Но теперь мы также видим, насколько хрупкими оказались производственные цепочки создания и применения доказательств в развитии!
Десять лет назад меня, вероятно, больше бы позабавила, чем заставила бы привыкнуть к иронии нынешней ситуации: контекст интервью (и книги в целом) заключался в том, что группа «выскочек» из экономистов, НПО и спонсоров противостояла ортодоксальной позиции Всемирного банка (и других организаций), который ставил в центр внимания макроэкономические проблемы и указывал на измеримые, реализуемые меры, такие как дегельминтизация, обучение на соответствующем уровне, предоставление противомоскитных сеток или денежные переводы беднейшим слоям населения. И это сработало! Фонды управления активами, GiveDirectly, GiveWell, Deworm the World — все это можно связать с работой этих «выскочек». Теперь, когда мы наблюдаем циклическое возвращение промышленной и энергетической политики на первое место в глобальных программах развития, один из этих бывших «выскочек» занимает пост главного экономиста.
Тем не менее, перечитывание вселяет в меня некоторый оптимизм. Ключевые проблемы в политике развития, которые Майкл описывает в интервью — важность доказательств, правильного выбора стимулов, инноваций, создания институтов, создания пространства для масштабирования, при этом признавая, что масштабирование сопряжено со своими уникальными проблемами, — сейчас как никогда актуальны. Необходимость противостоять новым неопределенным вызовам, в то время как старые проблемы упорно сохраняются (несмотря на прогресс), способность сочетать теорию и доказательства, применять взвешенные решения при распределении ресурсов, учитывая долгосрочные и вторичные последствия, реалистично оценивать то, что можно изменить, и амбициозно оценивать то, что необходимо изменить, — все это крайне необходимо. Майкл Кремер размышляет об этом и предпринимает шаги для их решения уже давно.
Следующий текст первоначально был опубликован в книге «Экспериментальные беседы» , вышедшей в 2017 году издательством MIT Press. 1
Тим: Что вас волновало, когда вы начали проводить рандомизированные оценки в Кении? Почему вы задумались о рандомизации и какое влияние, по вашему мнению, она могла бы оказать в то время?
Майкл: В начале 1990-х годов академические экономисты стали уделять повышенное внимание вопросу о том, как получить надежную эконометрическую идентификацию. Другими словами, как отделить причинно-следственное влияние конкретной политики или фактора от потенциальных искажающих факторов. Например, исследователи использовали методы инструментальных переменных.
Я был в отпуске в сельской местности Кении, где жил и преподавал в средней школе после окончания колледжа, и разговаривал с Полом Липеей, моим другом из Кении. Он устроился на работу в неправительственную организацию и сказал мне, что ему нужно выбрать семь школ для новой программы спонсорства детей. Мне пришло в голову, что, возможно, можно выбрать 14 школ и случайным образом распределить их, чтобы оценить причинно-следственную связь между программой и результатами. Мой друг поделился этой идеей со своим начальником [Чипом Бьюри из 2 International Child Support Africa], и они решили воплотить её в жизнь.
На основе этой первоначальной работы мне стало ясно, что рандомизация может стать практическим инструментом для экономистов, занимающихся вопросами развития, и что сотрудничество между исследователями и НПО позволит протестировать множество различных подходов. Рандомизация подходит не только для крупномасштабных, многомиллионных оценок государственных программ с исследовательскими вопросами, определяемыми правительством, но может быть реализована посредством сотрудничества между учеными и НПО. Она может пролить свет не только на программы спонсорства детей, но и на более широкие вопросы. В сфере образования, например, она может пролить свет на факторы, влияющие на приобретение человеческого капитала. Насколько низкие результаты обучения в развивающихся странах обусловлены, например, низким уровнем ресурсов в школах? Что, если бы мы могли использовать тот факт, что НПО вкладывают значительные средства в одни школы, но не в другие, чтобы попытаться понять, связаны ли низкие показатели обучения с недостатком ресурсов, с недостаточной подготовкой учителей, плохим здоровьем детей или с любыми другими возможными причинами? Вскоре стало ясно, что многие важные вопросы в экономике развития могут быть решены таким образом.
Участие в программах на местах и ограничение возможностей за счет использования рандомизированных оценок заставляет исследователей сталкиваться с реалиями человеческого поведения, даже если они не соответствуют нашим моделям. Это может привести к разработке более совершенных моделей с течением времени. Когда мы с Тедом Мигелем проводили оценку программы дегельминтизации ICS, мы обнаружили, что дегельминтизация принесла очень существенные выгоды, в конечном итоге приведя к повышению производительности труда.<sup> 3 Но, несмотря на эти выгоды, спрос на противоглистные препараты резко упал, когда НПО ввела даже небольшое требование о софинансировании. Серия рандомизированных контролируемых исследований (РКИ) позже подтвердила высокую чувствительность спроса на неэкстренные медицинские технологии к цене.<sup> 4 Накопление этих данных помогло нам уточнить наши теории спроса на медицинские услуги, показав, что теория человеческого капитала в отношении инвестиций в здравоохранение нуждается в корректировке. Между РКИ в области развития и поведенческой экономикой произошло очень продуктивное взаимодействие. Эта серия результатов также оказала важное влияние на политику. Всемирный банк был важным сторонником платы за медицинские услуги, но последний доклад Всемирного банка по поведенческой экономике ознаменовал собой важный поворот в этом вопросе, указав на то, что плата может отпугивать пользователей больше, чем можно было бы ожидать в рамках рациональной модели. 5
Тим: Меня интересуют идеи, которые циркулировали вокруг вас, когда вы начали работать над полевыми экспериментами. Это были критика внутривенной амплификации и поиск более точных методов идентификации? Вы думали об лабораторных экспериментах Канемана и других? Или о крупномасштабных экспериментах в США?
Майкл: В 1994 году, когда я начал свою работу в Кении, на меня очень сильно повлияло движение за более точную идентификацию в экономике труда и государственных финансах, но не лабораторные эксперименты. Я рассматриваю эти традиции как независимые, хотя сейчас наблюдается некоторое сближение традиций лабораторных и полевых экспериментов. Например, в работе Навы Ашраф интересные сочетания элементов каждой из них.
Я также не реагировал на критику инструментальных переменных. На самом деле, я думаю, что те, кто работал с инструментальными переменными, и те из нас, кто работал с рандомизированными контролируемыми исследованиями (РКИ), руководствовались одним и тем же импульсом — опасением, что большая часть эмпирических исследований в экономике того времени потенциально подвержена влиянию искажающих факторов и требует множества довольно сильных предположений. Тем не менее, это не значит, что инструментальные переменные решают все проблемы, как и РКИ. Я не думаю, что кто-то считает РКИ волшебным инструментом, но они действительно полезны для выявления причинно-следственной связи. Поэтому я бы сказал, что пытался выявить причинно-следственную связь таким образом, который являлся частью более широкого движения в экономической науке, направленного на более точное определение причинно-следственной связи.
Моим главным побуждением был практический подход — получить более убедительные ответы на реальные вопросы. Меня всегда в первую очередь интересовали фундаментальные вопросы о том, какие меры политики могут помочь в борьбе с бедностью, и я понял, что рандомизированные контролируемые исследования (РКИ) — это инструмент, который можно адаптировать для ответа на этот вопрос. Меня мотивировало желание сделать РКИ более гибким и полезным инструментом.
Тим: Чем из множества начинаний, в которых вы принимали участие — помощь в создании движения РКИ, инициативы «Продвижение рыночных обязательств», программа «Дегельминтизация мира», проект «Инновационные проекты в области развития», Глобальный инновационный фонд — вы больше всего гордитесь? Что, по вашему мнению, окажет наибольшее влияние через 20 лет?
Майкл: Я считаю все эти инициативы очень тесно связанными. Инициативы Advance Market Commitments направлены на поиск новых способов продвижения инноваций в целях развития. Другие инициативы также касаются инноваций в целях развития. Демонстрация возможности проведения рандомизированных контролируемых исследований (РКИ), разработка практических аспектов этой работы, обучение других специалистов данной методике, привлечение финансирования для проведения подобных исследований, а также помощь правительствам и другим заинтересованным сторонам в использовании результатов при разработке своей политики — все это часть комплексного подхода. Конечно, DIV и GIF поддерживают не только РКИ, но и инновации в развитии в целом.
Часто недооценивают огромный объем практических исследований и разработок, которые были вложены в поиск способов проведения рандомизированных оценок, отвечающих как на практические, так и на важные теоретические вопросы в развивающихся странах. Полевые эксперименты в 6 проводились с бюджетами в 40 миллионов долларов и более. Такие оценки, безусловно, могут быть очень важны, как показывает пример 7 . И кстати, насколько мне известно, 8 , хотя и проводилась примерно в то же время, когда я работал над первыми рандомизированными оценками, также была отдельным проектом. Я не думаю, что они знали, что я делаю, и я не думаю, что я знал, что они делают. Первые рандомизированные оценки с ICS в Кении проводились с очень небольшими бюджетами, и нам приходилось все разрабатывать с нуля. Работа с небольшими бюджетами в развивающихся странах привела к множеству инноваций в том, как максимизировать мощность при ограниченных выборках, как измерять результаты и как проводить рандомизацию. Ещё одно отличие заключалось в том, что мы работали с НПО, в отличие от масштабных государственных оценок, проводимых в США. Это было справедливо как для Кении, где я начинал, так и для Абхиджита в Индии несколько лет спустя.
Работа с НПО, в отличие от масштабных государственных оценок, открыла возможность ответить на гораздо более широкий круг вопросов, поскольку НПО более гибкие, чем правительства, и привыкли пробовать разные вещи. Они привыкли к тому, что не могут помочь всем, поэтому для них более естественно быть готовыми к рандомизации порядка поэтапного внедрения. Я помогла наладить долгосрочное партнерство с ICS в Кении, и работа, которую мы с Абхиджитом проделали с Seva Mandir 9 также переросла в долгосрочное партнерство. В рамках этих партнерств мы смогли протестировать самые разные идеи: от образования и здравоохранения до расширения прав и возможностей женщин и сельского хозяйства. Аспиранты смогли присоединиться к этим партнерствам и исследовать новые идеи, и эти аспиранты стали младшими, а затем и старшими преподавателями, преобразуя эту область.
Я также рада, что смогла сотрудничать с политиками, используя эти результаты для формирования политики. Иногда это включает в себя масштабирование конкретных инноваций — таких как дегельминтизация или дозаторы хлора, — а иногда — разработку более общих выводов, например, о влиянии цены на использование профилактических средств здравоохранения или о важности соответствия обучения текущему уровню знаний детей.
Масштабирование требует огромных усилий. Это стало совершенно очевидно на примере программы дегельминтизации. Мы представили наши результаты политикам, и, я думаю, они были искренне воодушевлены ими. Но у постоянного секретаря Министерства образования много дел, поэтому необходимы постоянное взаимодействие и поддержка. В случае с дегельминтизацией, например, мы стали соучредителями НПО «Deworm the World», которая оказывает техническую помощь правительствам во внедрении массовых программ дегельминтизации в школах. На создание НПО и запуск масштабных программ в Кении и Бихаре потребовалось много работы. Но теперь организация Evidence Action, которая переняла работу «Deworm the World», успешно поддерживает национальные программы в Кении, Эфиопии и Индии. Только за первую половину 2015 года они охватили 140 миллионов детей.
Из моего опыта работы над расширением масштабов дегельминтизации стало ясно, что необходима более широкая институциональная поддержка для масштабирования результатов рандомизированных контролируемых исследований (РКИ). Когда Радж Шах стал администратором USAID и попросил меня принять участие в этом проекте, я сказала ему, что хочу работать именно над этим. Он был воодушевлен этой идеей и предложил мне сотрудничать с Маурой О'Нил, имеющей опыт в предпринимательстве. Вместе мы основали в рамках USAID организацию Development Innovation Ventures (DIV) для финансирования пилотных проектов на ранних стадиях развития, тщательного тестирования этих идей и масштабирования тех, которые оказались наиболее успешными. DIV профинансировала множество РКИ по всему миру и помогла организациям масштабировать те, которые оказались успешными. Это действительно совершенно иная модель по сравнению со многими другими формами помощи в целях развития. Вместо того чтобы агентства по оказанию помощи принимали решения сверху вниз о том, во что инвестировать, а затем объявляли конкурсы предложений для реализации концепции, этот подход предполагает открытый конкурс инновационных идей, предоставление ресурсов для поддержки тщательного тестирования, а затем обусловливание дальнейшей поддержки результатами. Подход DIV повлиял на создание аналогичных фондов в Перу и Тамилнаду. DFID заинтересовалась нашей работой, и поэтому в течение последних нескольких лет я участвовал в создании нового международного проекта — Глобального инновационного фонда, который поддерживается США, Великобританией, Швецией, Австралией и сетью Omidyar. Мы запустили его только в этом году, и я очень этому рад.
Современное движение за рандомизированные контролируемые исследования (РКИ) в экономике развития часто относят к категории оценки, но на самом деле это движение связано как с инновациями, так и с оценкой. Это динамичный процесс изучения контекста посредством кропотливой работы на местах, опробования различных подходов, сбора качественных данных с четкой причинно-следственной связью, выявления несоответствия результатов предвзятым теоретическим представлениям, работы над улучшением теоретического понимания, соответствующего реальным фактам, и разработки новых идей и подходов на основе теории с последующим тестированием этих новых подходов. Идея DIV и GIF во многом связана с инновациями, поэтому, если вам нужна поддержка для пилотного внедрения вашей идеи, прежде чем вы будете готовы к строгой оценке воздействия, DIV и GIF оплатят это. Затем они оплатят строгую оценку воздействия, и если она окажется успешной, они также перейдут к следующему этапу, который заключается в содействии масштабированию инноваций.
Поэтому я вижу свою задачу в том, чтобы положить начало современному движению рандомизированных оценок, показать, что они возможны, работать с НПО, пытаться масштабировать успешные подходы к развитию, такие как дегельминтизация, извлекать уроки, например, о чувствительности профилактической медицины к плате за услуги, а затем пытаться создать институты для продолжения этой работы в комплексе, который, я надеюсь, окажет большое влияние.
Тим: Здесь подразумевается теория изменений, согласно которой проблема заключается в отсутствии институтов, способных собирать и использовать данные.
Майкл: Думаю, это верно. Многое из того, над чем я работал, можно рассматривать как создание институциональной структуры, позволяющей тщательно проверять и масштабировать идеи в области развития. Даже моя ранняя работа в Кении была направлена на создание местной инфраструктуры, позволяющей проводить высококачественные полевые эксперименты — от обученных интервьюеров до систем, через которые можно было бы получать гранты. Многие другие также помогли создать эту инфраструктуру, и мир за последние 20 лет проделал огромный путь. Есть J-PAL, есть IPA, есть 3ie, есть программа SIEF во Всемирном банке, есть DIME, так что достигнут огромный прогресс.
Тим: В критике концепции «институционализм имеет значение» есть некоторая ирония: рандомизированные контролируемые исследования обращают внимание на мелочи, но само движение создало эти институции.
Майкл: Рандомизированные контролируемые исследования не могут ответить на все вопросы, но они могут пролить свет на многие из них.
Вопрос о дегельминтизации может показаться незначительным, но исследования в этой области проливают свет на взаимосвязь здоровья и образования, чувствительность людей к небольшим доплатам за несложные медицинские услуги, реакцию поведения на информацию о здоровье и поток информации в социальных сетях. Они также помогли прояснить методологические проблемы измерения внешних эффектов.
Сейчас существует множество качественных рандомизированных контролируемых исследований (РКИ) по вопросам политической экономии. Бен Олкен проделал большую работу по изучению коррупции с использованием 10 11 и ведется активная работа по повышению эффективности работы бюрократических структур¹¹.
Часть моей работы в области образования, которая изначально начиналась как оценка программы учебников, в итоге оказалась посвящена институтам. Как я уже упоминал, одно из главных преимуществ рандомизированных контролированных исследований (РКИ) заключается в том, что они заставляют исследователей очень тесно соприкасаться с реальностью. Ученые не просто сидят и теоретизируют о проблемах развития; они работают непосредственно на практике. Очень часто в этом процессе они понимают, что их теории неверны, и придумывают новые. А затем, когда вы проверяете эти теории с помощью РКИ, вы часто удивляетесь результату. Нет возможности подкорректировать результат, чтобы он соответствовал вашим предвзятым представлениям, он такой, какой есть. РКИ заставляют вас столкнуться с реальностью.
Я преподавала в школе в Кении, и, видя, как мало ресурсов было в этих школах, я подумала, что было бы неплохо иметь больше ресурсов, включая больше учебников. Но мы обнаружили, что учебники улучшали результаты тестов только у тех, кто и так хорошо учился. Это заставило меня задуматься о проблемах соответствия учебной программы текущему уровню знаний учеников.
Учебники были написаны на уровне, значительно отстающем от уровня многих учеников. Один из главных уроков рандомизированных контролируемых исследований в образовании — это несоответствие между тем, каковы учебные программы, на что ориентировано преподавание и что соответствует уровню типичного ученика. Этому есть институциональные причины. Этому есть причины, связанные с политикой и экономикой. Я думаю, что благодаря рандомизированным оценкам мы гораздо лучше понимаем одну из ключевых институциональных проблем в образовании. В этом случае анализ институциональных причин несоответствия начался не с него, а с данных, которые и привели нас к нему.
Мы выявили ряд очень полезных мер, таких как коррекционное обучение, для решения этой проблемы, но реализация этих мер по-прежнему представляет собой серьезную политико-экономическую проблему. Это полезные меры, помогающие решить проблему, но нам, вероятно, также необходима реформа учебных программ, а это более сложная задача. Но нет причин, по которым, если мы проведем реформу учебных программ, мы не сможем оценить ее влияние с помощью рандомизированных оценок.
Некоторые другие критические замечания в адрес рандомизированных контролируемых исследований, например, о том, будут ли результаты, полученные в одном контексте, применимы к другим, касаются общих вопросов эмпирической работы, а не рандомизированных оценок.
Тим: Я хотел бы вернуться к вопросу о центрах вакцинации, который мы отложили в сторону в начале этой дискуссии. Есть веские основания полагать, что центры вакцинации увеличивают количество вакцин и, в сочетании с GAVI, позволяют вакцинировать гораздо больше детей, а также что одна из важнейших задач в развитии – предотвратить гибель большого количества детей и их необратимые физические или когнитивные увечья. Как бы вы сравнили потенциальное влияние создания институтов для сбора доказательств с эффектом «мы спасли много детей»?
Майкл: К институтам, стимулирующим НИОКР в области медицинских продуктов для развитых стран, относятся как государственное финансирование биомедицинских исследований, так и права интеллектуальной собственности, поощряющие НИОКР частного сектора. Идея создания ассоциаций производителей медицинских препаратов (АМП) заключалась в расширении набора инструментов, доступных нам для стимулирования НИОКР. Системы прав интеллектуальной собственности создают стимулы для НИОКР, но также включают в себя некоторые статические искажения, которые могут быть довольно дорогостоящими. Могут также присутствовать и динамические искажения. Я написал статью об идее выкупа патентов — фирмы могли бы добровольно продавать свои патенты правительствам, что могло бы сделать их общественным достоянием. 12 Это сохраняет динамические стимулы для НИОКР, создаваемые правами интеллектуальной собственности, но позволяет избежать некоторых статических искажений, связанных с правами интеллектуальной собственности, а также некоторых динамических искажений, таких как стимул к разработке «аналогичных» лекарств только для того, чтобы обойти патент, и препятствия для разработки последующих лекарств.
Соглашения о сотрудничестве в области разработки вакцин во многом схожи с выкупом патента, но, как оказалось, их было проще реализовать институционально и политически. 13 Для перехода от академической идеи к чему-то, что можно было бы внедрить в политику, потребовалось проделать огромную работу. 14 Замечательно, что это было сделано для пневмококковой вакцины, и затем эта вакцина была разработана.
Я думаю, что наибольшая потенциальная польза от создания центров разработки вакцин (ЦОК) заключалась бы в стимулировании исследований и разработок в области заболеваний, которые встречаются несколько позже. В случае с пневмококком уже существовала вакцина против штаммов, распространенных в богатых странах, но не было вакцины, которая бы охватывала все штаммы, актуальные для многих более бедных стран. Это была технологическая задача, которую я не хочу преуменьшать, но она была менее сложной, чем разработка совершенно новой вакцины. Я давно не занимался этим, хотя сейчас пишу научную статью о вакцинах и лекарствах. Но в целом, я думаю, что есть возможности для институциональных инноваций в создании новых механизмов для стимулирования исследований и разработок и обеспечения доступности продукции. Надеюсь, я когда-нибудь вернусь к этой работе.
Тим: Вы задумываетесь о своей роли в обучении, прямо или косвенно, многих людей, участвующих в проведении рандомизированных оценок? Рискуя спровоцировать вас на несколько не очень скромных высказываний, каков был бы гипотетический сценарий мира без Майкла Кремера?
Майкл: За эти годы было здорово работать с потрясающими аспирантами и соавторами, многие из которых сейчас делают невероятные вещи. Одним из замечательных моментов в создании подразделения ICS в Бусиа стало наблюдение за этими невероятно талантливыми людьми, которые проходят обучение в первоклассных учреждениях, и то, как они применяют полученные знания на практике в Кении, генерируя фантастические идеи.
Я думаю, это было очень ценно для студентов, но это также ценно и для всего мира, поскольку многие из этих студентов впоследствии добились больших успехов. Я очень этому рад.
Тим: Одна из версий влияния движения полевых экспериментов заключается в том, что мы перешли от ситуации, когда серьезные экономисты, как правило, не выезжали на места исследований, к ситуации, когда это происходит. Вам это знакомо?
Майкл: Миру нужны самые разные исследования.
Нам нужны полевые исследователи, теоретики, макроэкономисты. В области экономической истории ведётся фантастическая работа. Я считаю, что идея проводить время в полевых условиях, участвовать в рандомизированных исследованиях и других полевых работах — это замечательно, и это очень важный набор методов и инструментов. Я также открыт для других подходов. Я считаю, что в целом экономистам, занимающимся вопросами развития, полезно иметь опыт жизни и работы в развивающихся странах, но это не означает, что каждый проект должен основываться на полевых исследованиях.
Тимоти Огден — управляющий директор Financial Access Initiative, исследовательской организации, изучающей, как финансовые услуги могут лучше удовлетворять потребности и улучшать жизнь малоимущих домохозяйств. Он является автором книги «Экспериментальные беседы» — сборника интервью с экономистами, проводившими полевые эксперименты по мерам борьбы с бедностью. Он также входит в совет директоров GiveWell и является старшим научным сотрудником Программы экономических возможностей Института Аспена.
Если у вас есть комментарии к этой статье или вы хотите принять участие в обсуждении, пожалуйста, отправьте их по электронной почте на адрес letters@indevelopmentmag.com. Ответы будут опубликованы в разделе писем читателей.
- В частности: Огден, Тимоти Н., Экспериментальные беседы: Перспективы рандомизированных исследований в экономике развития, © 2017 Массачусетский технологический институт, с разрешения издательства MIT Press. ↩︎
- Эта работа была опубликована под названием Glewwe, Paul, Michael Kremer, and Sylvie Moulin. “Many Children Left Behind? Textbooks and Test Scores in Kenya.” American Economic Journal: Applied Economics 1 (1) (2009): 112–35. doi:10.1257/app.1.1.112.. Хотя эта работа сыграла важную роль в запуске движения РКИ, она была официально опубликована только в 2009 году, значительно позже публикации многих других влиятельных работ по РКИ. ↩︎
- Мигель, Эдвард и Майкл Кремер. «Черви: выявление влияния на образование и здоровье в условиях внешних эффектов лечения». Econometrica 72 (1) (2004): 159–217. doi:10.1111/j.1468-0262.2004.00481.x. ↩︎
- Паскалин Дюпа принимала участие в значительной части этой работы, и некоторые из ее аспектов обсуждаются в ее интервью в журнале Experimental Conversations. В J-PAL есть обзор этой темы со ссылками на множество статей, который можно найти здесь . ↩︎
- См., в частности, главу 8: «Здоровье». В докладе «Мировой доклад о развитии 2015: Разум, общество и поведение». Вашингтон, округ Колумбия: Всемирный банк, 2015. ↩︎
- Эти полевые эксперименты федеральных программ в США обсуждаются в интервью с Джуди Герон в книге «Экспериментальные беседы» . ↩︎
- Программа PROGRESA, пожалуй, является прародителем современных программ условных денежных выплат, которые предусматривают социальные выплаты при условии, что получатели предпримут определенные действия, такие как продолжение обучения детей в школе или вакцинация. Программа PROGRESA была оценена с помощью рандомизированного исследования, которое использовало необходимость поэтапного внедрения программы в течение нескольких лет и выявило значительное влияние на многие интересующие показатели. Успех PROGRESA вдохновил на внедрение программ условных денежных выплат во многих странах мира. ↩︎
- Обзор программы PROGRESA и ее влияния см. в: Skoufias, Emmanuel, and Bonnie McClafferty. “Is PROGRESA Working? Summary of the results of an evaluation by IFPRI.” FCND Discussion Paper 118. Washington, DC, 2001. http://ebrary.ifpri.org/cdm/ref/collection/p15738coll2/id/77118. ↩︎
- Seva Mandir — это неправительственная организация, базирующаяся в Раджастане, Индия. Она участвовала в ряде рандомизированных контролируемых исследований в области раннего образования, а также в эксперименте по популяризации иммунизации (об этом рассказывается в интервью с Эстер Дюфло и Абхиджитом Банерджи в книге «Экспериментальные беседы »). ↩︎
- Это включает в себя работу в Индонезии по вымогательству у водителей грузовиков и по коррупции в дорожном строительстве, а также разрыв между восприятием коррупции и фактической коррупцией. Для обзора см. Olken and Pande, “Corruption in Developing Countries” Annual Review of Economics (2012), Olken, Benjamin A., and Patrick Barron. “The Simple Economics of Extortion: Evidence from Trucking in Aceh.” Journal of Political Economy 117 (3) (2009): 417–52. doi: 10.1086/599707, Olken, Benjamin A. “Monitoring Corruption: Evidence from a Field Experiment in Indonesia.” Journal of Political Economy 115 (2) (2007): 200–49. doi: 10.1086/517935. ↩︎
- См., например, работу Банерджи и др., посвященную полиции Раджастана, и работу Олкена о системе оплаты труда налоговых инспекторов в Индии в зависимости от результатов работы. ↩︎
- Кремер, Майкл. «Выкуп патентов: механизм стимулирования инноваций». Ежеквартальный журнал экономики 113 (4) (1998): 1137–67. doi:10.1162/003355398555865. ↩︎
- Кремер, Майкл, и Рейчел Гленнерстер. Сильная медицина: создание стимулов для фармацевтических исследований забытых болезней. Принстон: Издательство Принстонского университета, 2004. ↩︎
- Это включало не только оригинальные экономические работы, но и книгу ( «Сильная медицина» ), а также рабочую группу в Центре глобального развития до создания и финансирования организации для управления рынками вакцин. См.: Левин, Рут, Майкл Кремер и Элис Олбрайт. Создание рынков вакцин: от идей к действиям. Вашингтон, округ Колумбия: Центр глобального развития, 2005. ↩︎