Michael Kremer baru-baru ini diangkat sebagai Kepala Ekonom baru Bank Dunia. Pada kesempatan ini, kami menayangkan kembali percakapan antara beliau dan Timothy Ogden di mana Kremer membahas pendekatannya terhadap ekonomi, yang didahului oleh refleksi dari Timothy tentang apa yang telah berubah dalam pembangunan selama dekade sejak percakapan awal.
Pendekatan Michael Kremer terhadap Ekonomi
Tim: Wawancara yang dicetak ulang di sini adalah versi yang diedit dari serangkaian percakapan yang dimulai pada akhir tahun 2014 dan berlanjut hingga tahun 2015. Semua percakapan itu terjadi jauh sebelum Hadiah Nobel (ya, ya, saya tahu), perampingan USAID, DFID, dan sebagian besar dunia bantuan pembangunan resmi, dan, tentu saja, sebelum Kremer dipertimbangkan, apalagi diangkat, sebagai Kepala Ekonom di Bank Dunia. Mungkin bagian yang paling mengejutkan dari membaca wawancara ini lagi lebih dari satu dekade kemudian adalah betapa Michael sangat menghargai pembangunan infrastruktur yang memungkinkan penggunaan bukti dalam kebijakan, padahal sebagian besar infrastruktur tersebut sekarang hancur atau menghadapi masa depan yang sangat tidak pasti.
Sekarang saya tidak mungkin untuk tidak melihat wawancara ini, dan keadaan terkini bantuan dan infrastruktur pembangunan internasional, melalui lensa Teori O-Ring Kremer. Anda dapat membaca pembelaan Michael terhadap RCT (Randomized Controlled Trials) terhadap para kritikus sebagai hasil dari kebutuhan untuk menyelidiki dengan cermat setiap celah dan hambatan dalam proses pembangunan dan menilai apakah menghilangkan kendala ini atau itu akan berdampak pada hasil. Tetapi sekarang kita juga dapat melihat betapa rapuhnya rantai produksi pembangunan dan penerapan bukti dalam pembangunan!
Sepuluh tahun yang lalu, saya mungkin akan lebih merasa geli, daripada terbiasa, dengan ironi situasi saat ini: konteks wawancara (dan buku secara keseluruhan) adalah sekelompok ekonom, LSM, dan pendana "pemberani" yang menentang ortodoksi Bank Dunia (dan lainnya) yang berpusat pada masalah makroekonomi dan mengarah pada intervensi yang terukur dan dapat diimplementasikan seperti pemberantasan cacingan, pengajaran pada tingkat yang tepat, pemberian kelambu, atau transfer tunai kepada masyarakat termiskin. Dan itu berhasil! AMC, GiveDirectly, GiveWell, Deworm the World semuanya dapat dikaitkan dengan karya para "pemberani" tersebut. Sekarang, ketika kita melihat kembalinya kebijakan industri dan energi secara siklus ke puncak agenda pembangunan global, salah satu mantan "pemberani" tersebut menduduki posisi Kepala Ekonom.
Namun, pembacaan ulang saya memberi saya sedikit optimisme. Kekhawatiran utama dalam kebijakan pembangunan yang dijelaskan Michael dalam wawancara—pentingnya bukti, pentingnya insentif yang tepat, inovasi, pembangunan institusi, dan menciptakan ruang untuk berkembang sambil menyadari bahwa skala memiliki tantangan uniknya sendiri—hampir tidak bisa lebih penting lagi saat ini. Kebutuhan untuk menghadapi tantangan baru yang tidak pasti sementara tantangan lama tetap ada (terlepas dari kemajuan), kemampuan untuk menggabungkan teori dan bukti, menerapkan penilaian pada alokasi sumber daya sambil memikirkan efek jangka panjang dan efek tingkat kedua dan ketiga, bersikap realistis tentang apa yang dapat diubah sambil bersikap ambisius tentang apa yang perlu diubah, semua ini sangat dibutuhkan. Michael Kremer telah memikirkan hal-hal ini, dan melakukan sesuatu tentangnya, untuk waktu yang lama.
Berikut ini awalnya muncul di Experimental Conversations , yang diterbitkan pada tahun 2017 oleh MIT Press. 1
Tim: Apa yang ada di pikiran Anda ketika Anda mulai melakukan evaluasi acak di Kenya? Mengapa Anda memikirkan tentang pengacakan dan dampak apa yang Anda pikir akan ditimbulkannya pada saat itu?
Michael: Pada awal tahun 1990-an, para ekonom akademis semakin memperhatikan isu tentang bagaimana mendapatkan identifikasi ekonometrik yang andal. Dengan kata lain, bagaimana memisahkan dampak kausal dari kebijakan atau faktor tertentu dari faktor-faktor pengganggu potensial. Misalnya, para peneliti menggunakan teknik variabel instrumental.
Saya sedang berlibur ke komunitas pedesaan di Kenya tempat saya tinggal dan mengajar di sekolah menengah setelah kuliah, dan sedang berbicara dengan Paul Lipeyah, seorang teman saya dari Kenya. Dia mendapatkan pekerjaan di sebuah LSM dan memberi tahu saya bahwa dia perlu memilih tujuh sekolah untuk program sponsor anak yang baru. Terlintas di pikiran saya bahwa mungkin akan memungkinkan untuk memilih 14 sekolah dan mengacaknya untuk mengevaluasi dampak kausal dari program tersebut. Teman saya menyampaikan ide itu kepada atasannya [Chip Bury dari International Child Support Africa] dan mereka memutuskan untuk melakukannya. 2
Berdasarkan pekerjaan awal ini, menjadi jelas bagi saya bahwa pengacakan dapat dijadikan alat praktis bagi para ekonom pembangunan, dan bahwa kolaborasi antara peneliti dan LSM dapat memungkinkan pengujian berbagai pendekatan yang berbeda. Pengacakan bukan hanya untuk evaluasi program pemerintah berskala sangat besar dan bernilai jutaan dolar dengan pertanyaan penelitian yang ditentukan oleh pemerintah, tetapi dapat diimplementasikan melalui kolaborasi antara akademisi dan LSM. Hal ini dapat memberikan wawasan tidak hanya pada program sponsor anak tetapi juga pada pertanyaan yang lebih luas. Dalam bidang pendidikan, misalnya, hal ini dapat memberikan wawasan tentang pendorong perolehan modal manusia. Seberapa besar hasil belajar yang buruk di negara-negara berkembang disebabkan oleh rendahnya tingkat sumber daya di sekolah, misalnya? Bagaimana jika kita dapat menggunakan fakta bahwa LSM memberikan dana dalam jumlah besar ke beberapa sekolah dan tidak ke sekolah lain, untuk mencoba memahami apakah tingkat belajar yang rendah disebabkan oleh kurangnya masukan, atau apakah itu disebabkan oleh pelatihan guru, atau kesehatan anak yang buruk, atau sejumlah penyebab lain yang mungkin? Segera menjadi jelas bahwa banyak pertanyaan penting dalam ekonomi pembangunan dapat dijawab dengan cara ini.
Keterlibatan dalam program di lapangan dan keterbatasan yang ditimbulkan oleh evaluasi acak memaksa para peneliti untuk menghadapi realitas perilaku manusia, meskipun tidak sesuai dengan model kita. Hal ini dapat mengarah pada pengembangan model yang lebih baik dari waktu ke waktu. Ketika Ted Miguel dan saya melakukan evaluasi program pemberantasan cacingan ICS, kami menemukan bahwa pemberantasan cacingan memberikan manfaat yang sangat besar—yang pada akhirnya meningkatkan produktivitas angkatan kerja. 3 Namun terlepas dari manfaat tersebut, permintaan pil pemberantasan cacingan menurun tajam ketika LSM tersebut memberlakukan persyaratan pembagian biaya, meskipun kecil. Serangkaian RCT kemudian mengkonfirmasi sensitivitas tinggi permintaan teknologi kesehatan non-akut terhadap harga. 4 Akumulasi bukti ini membantu kami untuk menyempurnakan teori permintaan kesehatan kami, menunjukkan bahwa teori modal manusia tentang investasi dalam kesehatan perlu disesuaikan. Telah terjadi interaksi yang sangat produktif antara RCT dalam pembangunan dan ekonomi perilaku. Serangkaian hasil ini juga memiliki dampak penting pada kebijakan. Bank Dunia telah menjadi pendukung penting biaya layanan kesehatan, tetapi Laporan Pembangunan Dunia terbaru tentang ekonomi perilaku menandakan pembalikan penting, dengan menekankan bahwa biaya dapat menghambat penggunaan lebih dari yang diperkirakan dalam model rasional. 5
Tim: Saya tertarik dengan gagasan-gagasan yang beredar di sekitar Anda ketika Anda mulai mengerjakan eksperimen lapangan. Apakah itu kritik terhadap IV dan pencarian identifikasi yang lebih baik? Apakah Anda memikirkan eksperimen laboratorium dari Kahneman dan lainnya? Atau eksperimen skala besar di AS?
Michael: Pada tahun 1994 ketika saya memulai pekerjaan di Kenya, saya sangat dipengaruhi oleh gerakan untuk identifikasi yang lebih baik dalam ekonomi tenaga kerja dan keuangan publik, tetapi bukan oleh eksperimen laboratorium. Saya melihat tradisi-tradisi ini sebagai hal yang independen, meskipun sekarang ada beberapa konvergensi antara tradisi eksperimen laboratorium dan eksperimen lapangan. Misalnya, karya Nava Ashraf menggabungkan elemen-elemen dari masing-masing tradisi tersebut dengan cara yang menarik.
Saya juga tidak menanggapi kritik terhadap variabel instrumental. Memang, saya pikir mereka yang bekerja pada variabel instrumental dan kami yang bekerja pada RCT (Randomized Controlled Trials) termotivasi oleh dorongan yang sama, yaitu kekhawatiran bahwa banyak pekerjaan empiris dalam ekonomi pada saat itu berpotensi dipengaruhi oleh faktor pengganggu dan membutuhkan banyak asumsi yang cukup kuat. Meskipun demikian, bukan berarti variabel instrumental menghilangkan semua masalah, dan RCT pun tidak. Saya rasa tidak ada yang berpikir bahwa RCT itu ajaib, tetapi RCT adalah alat yang sangat berguna untuk mendapatkan dampak kausal. Jadi, saya akan mengatakan bahwa saya mencoba untuk mendapatkan dampak kausal dengan cara yang merupakan bagian dari gerakan yang lebih luas dalam profesi ekonomi untuk mendapatkan identifikasi yang lebih baik.
Dorongan utama saya bersifat praktis—untuk mendapatkan jawaban yang lebih meyakinkan atas pertanyaan-pertanyaan di dunia nyata. Saya selalu terutama tertarik pada pertanyaan mendasar tentang kebijakan apa yang dapat mengatasi kemiskinan dan saya menyadari bahwa RCT (Randomized Controlled Trials) adalah alat yang dapat diadaptasi untuk membantu menjawab pertanyaan ini. Saya termotivasi untuk menjadikan RCT sebagai alat yang lebih fleksibel dan bermanfaat.
Tim: Dari sekian banyak upaya yang telah Anda ikuti—membantu memulai gerakan RCT, Advance Market Commitments, Deworm the World, Development Innovation Ventures, Global Innovation Fund—mana yang paling Anda banggakan? Menurut Anda, apa yang akan memberikan dampak terbesar jika dilihat kembali 20 tahun dari sekarang?
Michael: Saya melihat semua inisiatif ini sangat terkait erat. Advance Market Commitments (Komitmen Pasar Lanjutan) adalah tentang menemukan cara-cara baru untuk mempromosikan inovasi untuk pembangunan. Yang lainnya juga tentang inovasi untuk pembangunan. Mendemonstrasikan bahwa RCT (Uji Coba Acak Terkontrol) dapat dilakukan, memikirkan hal-hal praktis tentang bagaimana melakukan pekerjaan ini, melatih orang lain dalam teknik tersebut, mengumpulkan dana agar orang lain dapat melakukannya, dan membantu pemerintah dan pihak lain menggunakan hasilnya dalam mengembangkan kebijakan mereka, semuanya merupakan bagian dari satu paket. Tentu saja, DIV dan GIF mendukung tidak hanya RCT tetapi juga inovasi dalam pembangunan secara lebih luas.
Orang sering meremehkan banyaknya penelitian dan pengembangan praktis yang dilakukan untuk menemukan cara agar evaluasi acak yang menjawab pertanyaan praktis dan teoritis penting di negara berkembang dapat dilakukan. Eksperimen lapangan di 6 dilakukan dengan anggaran 40 juta dolar atau lebih. Evaluasi semacam itu jelas sangat penting, seperti yang ditunjukkan oleh contoh 7 . Dan 8 -omong, setahu saya, PROGRESA, meskipun berlangsung sekitar waktu yang sama ketika saya mengerjakan evaluasi acak pertama tersebut, juga merupakan sesuatu yang terpisah. Saya rasa mereka tidak tahu apa yang saya lakukan dan saya rasa saya juga tidak tahu apa yang mereka lakukan. Evaluasi acak awal dengan ICS di Kenya dilakukan dengan anggaran yang sangat kecil, dan kami harus mengerjakan semuanya dari awal. Bekerja dengan anggaran kecil di negara berkembang menghasilkan banyak inovasi tentang bagaimana memaksimalkan kekuatan dari sampel terbatas, bagaimana mengukur hasil, dan bagaimana melakukan pengacakan. Perbedaan lainnya adalah kami bekerja dengan LSM, berbeda dengan evaluasi pemerintah skala besar yang dilakukan di AS. Hal ini berlaku baik di Kenya tempat saya memulai, dan kemudian bersama Abhijit di India beberapa tahun kemudian.
Bekerja dengan LSM, berbeda dengan evaluasi pemerintah besar, membuka kemampuan untuk menjawab berbagai pertanyaan yang jauh lebih luas, karena LSM lebih gesit daripada pemerintah dan mereka terbiasa mencoba berbagai hal. Mereka terbiasa tidak dapat melayani semua orang, sehingga lebih wajar bagi mereka untuk bersedia mencoba mengacak urutan penerapan program. Saya membantu membangun kemitraan jangka panjang dengan ICS di Kenya, dan pekerjaan yang saya dan Abhijit lakukan dengan Seva Mandir 9 juga berubah menjadi kemitraan jangka panjang. Dalam kemitraan tersebut, kami dapat menguji berbagai macam ide, mulai dari pendidikan, kesehatan, pemberdayaan perempuan, hingga pertanian. Mahasiswa pascasarjana dapat bergabung dalam kemitraan tersebut dan mengeksplorasi ide-ide baru, dan mahasiswa pascasarjana tersebut menjadi dosen junior dan kemudian dosen senior, yang mentransformasi bidang ini.
Saya juga senang dapat bekerja sama dengan para pembuat kebijakan untuk menggunakan hasil ini sebagai dasar kebijakan. Terkadang hal ini melibatkan peningkatan skala inovasi tertentu—seperti pengobatan cacingan atau dispenser klorin—dan terkadang melibatkan pengembangan pelajaran yang lebih umum, seperti dampak harga terhadap penggunaan produk kesehatan preventif atau pentingnya menyesuaikan pengajaran dengan tingkat pembelajaran anak saat ini.
Dibutuhkan banyak usaha untuk mengembangkan program dalam skala besar. Hal itu menjadi sangat jelas dalam pengalaman pemberantasan cacingan. Kami mempresentasikan hasil kami kepada para pembuat kebijakan dan saya pikir mereka benar-benar antusias. Tetapi seorang Sekretaris Tetap di Kementerian Pendidikan akan memiliki banyak hal yang harus ditangani, sehingga keterlibatan dan dukungan yang berkelanjutan sangat dibutuhkan. Dalam kasus pemberantasan cacingan, misalnya, kami ikut mendirikan sebuah LSM, Deworm the World, untuk memberikan bantuan teknis kepada pemerintah dalam memperkenalkan program pemberantasan cacingan massal berbasis sekolah. Butuh banyak kerja keras untuk memulai LSM tersebut dan menjalankan beberapa program skala besar di Kenya dan Bihar. Tetapi sekarang Evidence Action, yang mengambil alih pekerjaan Deworm the World, berhasil mendukung program-program nasional di Kenya, Ethiopia, dan India. Mereka telah menjangkau 140 juta anak hanya dalam paruh pertama tahun 2015.
Dari pengalaman saya bekerja dalam meningkatkan skala program pemberantasan cacingan, menjadi jelas bahwa ada kebutuhan akan lebih banyak dukungan kelembagaan untuk meningkatkan skala pembelajaran yang diperoleh dari RCT (Randomized Controlled Trials). Ketika Raj Shah menjadi Administrator USAID dan meminta saya untuk terlibat, inilah yang saya katakan kepadanya tentang apa yang ingin saya kerjakan. Dia antusias dengan ide tersebut dan menyarankan agar saya bekerja sama dengan Maura O'Neill, yang memiliki latar belakang kewirausahaan. Bersama-sama kami mendirikan Development Innovation Ventures (DIV) di dalam USAID untuk membiayai uji coba tahap awal ide-ide baru dalam pembangunan, pengujian yang ketat terhadap ide-ide tersebut, dan peningkatan skala ide-ide yang terbukti paling sukses. DIV telah mendanai banyak RCT di seluruh dunia dan telah membantu organisasi untuk meningkatkan skala RCT yang berhasil. Ini benar-benar model yang sangat berbeda dari sebagian besar bantuan pembangunan. Alih-alih lembaga bantuan membuat keputusan dari atas ke bawah tentang apa yang akan diinvestasikan dan kemudian mengeluarkan panggilan untuk proposal untuk mengimplementasikan visi tersebut, pendekatan ini melibatkan panggilan terbuka untuk ide-ide inovatif, menyediakan sumber daya untuk mendukung pengujian yang ketat, dan kemudian menjadikan dukungan lebih lanjut bergantung pada hasil. Pendekatan DIV telah memengaruhi pembentukan dana terkait di Peru dan Tamil Nadu. DFID tertarik dengan apa yang kami lakukan, dan selama beberapa tahun terakhir saya terlibat dalam mendirikan usaha internasional baru, Dana Inovasi Global, yang didukung oleh AS, Inggris, Swedia, Australia, dan Jaringan Omidyar. Kami baru saja meluncurkannya tahun ini, dan saya sangat antusias tentang hal itu.
Gerakan modern untuk RCT (Randomized Controlled Trials) dalam ekonomi pembangunan sering kali dimasukkan dalam kategori evaluasi, tetapi sebenarnya gerakan ini juga tentang inovasi, serta evaluasi. Ini adalah proses dinamis untuk mempelajari suatu konteks melalui kerja lapangan yang teliti, mencoba berbagai pendekatan, mengumpulkan data yang baik dengan identifikasi kausal yang baik, menemukan bahwa hasil tidak sesuai dengan ide teoritis yang telah dipikirkan sebelumnya, berupaya untuk mendapatkan pemahaman teoritis yang lebih baik yang sesuai dengan fakta di lapangan, dan mengembangkan ide dan pendekatan baru berdasarkan teori, kemudian menguji pendekatan baru tersebut. Ide DIV dan GIF sangat berkaitan dengan inovasi, jadi jika Anda membutuhkan dukungan untuk menguji coba ide Anda sebelum Anda siap untuk mengevaluasi dampak secara ketat, DIV dan GIF akan membayar untuk itu. Kemudian mereka akan membayar untuk evaluasi dampak yang ketat, dan jika berhasil, mereka juga akan melanjutkan ke tahap berikutnya, yaitu mencoba membantu transisi inovasi ke skala yang lebih besar.
Jadi, saya melihat upaya untuk memulai gerakan modern evaluasi acak, menunjukkan bahwa hal itu mungkin dilakukan, bekerja sama dengan LSM, berupaya untuk meningkatkan skala pendekatan pembangunan yang sukses seperti pemberantasan cacingan, mengambil pelajaran seperti sensitivitas perawatan kesehatan preventif terhadap biaya, dan kemudian mencoba membangun institusi untuk terus melakukan hal-hal ini sebagai sebuah paket yang saya harap akan memberikan dampak yang besar.
Tim: Ada teori perubahan tersirat di sana tentang masalahnya yaitu kurangnya institusi untuk menghasilkan dan menggunakan bukti.
Michael: Saya rasa itu benar. Anda dapat melihat banyak hal yang telah saya kerjakan sebagai upaya menciptakan kerangka kerja kelembagaan untuk memungkinkan ide-ide dalam pembangunan diuji secara ketat dan ditingkatkan skalanya. Bahkan pekerjaan awal saya di Kenya adalah membangun infrastruktur lokal untuk memungkinkan orang menjalankan eksperimen lapangan berkualitas tinggi—mulai dari enumerator terlatih hingga sistem yang dapat digunakan orang untuk mengelola hibah. Banyak orang lain juga telah membantu membangun infrastruktur tersebut dan dunia telah mengalami kemajuan yang signifikan dalam 20 tahun terakhir. Ada J-PAL, ada IPA, ada 3ie, ada program SIEF di Bank Dunia, ada DIME, jadi kemajuan yang luar biasa telah dicapai.
Tim: Ada sedikit ironi dalam kritik "institusi itu penting" bahwa RCT (Randomized Controlled Trials) memperhatikan hal-hal yang terlalu kecil, tetapi gerakan ini justru telah menciptakan institusi.
Michael: Uji coba terkontrol secara acak (RCT) tidak dapat digunakan untuk menjawab setiap masalah, tetapi dapat memberikan pencerahan pada banyak masalah.
Pemberian obat cacing mungkin tampak seperti masalah kecil, tetapi evaluasi terhadap pemberian obat cacing memberikan wawasan tentang keterkaitan antara kesehatan dan pendidikan, sensitivitas masyarakat terhadap biaya kecil untuk layanan kesehatan non-akut, respons perilaku terhadap informasi kesehatan, dan aliran informasi melalui jaringan sosial. Hal ini juga membantu menjelaskan masalah metodologis tentang pengukuran eksternalitas.
Saat ini terdapat banyak RCT (Randomized 11 Trials) yang bagus mengenai pertanyaan-pertanyaan ekonomi politik. Ben Olken telah melakukan banyak pekerjaan bagus tentang korupsi menggunakan 10 dan ada banyak pekerjaan tentang bagaimana membuat birokrasi lebih responsif.¹¹
Sebagian dari pekerjaan saya di bidang pendidikan yang awalnya dimulai sebagai evaluasi program buku teks akhirnya berfokus pada institusi. Seperti yang saya sebutkan sebelumnya, salah satu hal hebat tentang evaluasi acak adalah memaksa para peneliti untuk benar-benar memahami realitas di lapangan. Para akademisi tidak hanya duduk-duduk berteori tentang tantangan pembangunan; mereka terjun langsung ke lapangan. Seringkali dalam proses itu mereka menyadari bahwa teori mereka salah, dan mereka mengembangkan teori baru. Dan kemudian ketika Anda menguji teori-teori tersebut dengan RCT (Randomized Controlled Trial), Anda sering terkejut dengan hasilnya. Tidak ada ruang untuk mengubah hasil Anda agar sesuai dengan gagasan yang telah Anda miliki sebelumnya, hasilnya memang seperti itu. RCT memaksa Anda untuk menghadapi kenyataan.
Saya pernah mengajar di sebuah sekolah di Kenya, dan melihat betapa sedikitnya sumber daya yang dimiliki sekolah-sekolah tersebut membuat saya berpikir bahwa akan lebih baik jika memiliki lebih banyak sumber daya, termasuk lebih banyak buku teks. Tetapi kami menemukan bahwa buku teks hanya meningkatkan nilai ujian bagi mereka yang sudah berprestasi baik. Hal itu membuat saya berpikir tentang masalah kesesuaian antara kurikulum dan kondisi siswa saat ini.
Buku teks ditulis pada tingkat yang jauh dari tingkat kemampuan banyak siswa. Salah satu pelajaran besar dari RCT (Randomized Controlled Trials) dalam pendidikan adalah ketidaksesuaian antara kurikulum yang ada dan orientasi pengajaran dengan kemampuan siswa pada umumnya. Ada alasan kelembagaan untuk itu. Ada alasan ekonomi politik untuk itu. Saya pikir kita lebih memahami salah satu masalah kelembagaan utama dalam pendidikan karena evaluasi acak. Dalam hal ini, awalnya tidak dimulai dengan analisis alasan kelembagaan untuk ketidaksesuaian tersebut, tetapi data yang membawa kita pada kesimpulan itu.
Kami telah mengidentifikasi sejumlah intervensi yang sangat bermanfaat, seperti pendidikan remedial, untuk mengatasi masalah tersebut, tetapi implementasi intervensi tersebut masih menjadi masalah ekonomi politik yang besar. Kebijakan-kebijakan tersebut bermanfaat untuk membantu mengatasi masalah ini, tetapi kita mungkin juga membutuhkan reformasi kurikulum, dan itu adalah tugas yang lebih sulit. Namun, tidak ada alasan mengapa jika kita melakukan reformasi kurikulum, kita tidak dapat memahami dampaknya dengan evaluasi acak.
Beberapa kritik lain terhadap RCT, misalnya, tentang apakah hasil dari satu konteks akan dapat digeneralisasikan ke konteks lain, adalah poin umum tentang pekerjaan empiris, bukan tentang evaluasi acak.
Tim: Saya ingin kembali ke isu AMC yang kita kesampingkan di awal diskusi ini. Ada argumen yang masuk akal bahwa AMC meningkatkan jumlah vaksin dan, dikombinasikan dengan GAVI, membuat lebih banyak anak divaksinasi—dan bahwa salah satu hal terpenting yang harus terjadi dalam pengembangan adalah mencegah banyak anak meninggal atau mengalami cacat fisik atau kognitif permanen. Bagaimana Anda membandingkan dampak potensial dari membangun institusi untuk menghasilkan bukti, dibandingkan dengan "kita menyelamatkan banyak anak"?
Michael: Lembaga-lembaga yang mendorong penelitian dan pengembangan (R&D) produk kesehatan untuk negara-negara maju mencakup pendanaan penelitian biomedis publik dan hak kekayaan intelektual untuk mendorong R&D sektor swasta. Gagasan AMC adalah untuk memperluas seperangkat alat yang kita miliki untuk mendorong R&D. Sistem hak kekayaan intelektual menciptakan insentif R&D tetapi juga melibatkan beberapa distorsi statis, dan hal itu bisa sangat mahal. Mungkin juga ada beberapa distorsi dinamis. Saya telah menulis sebuah makalah tentang gagasan membeli paten—perusahaan dapat secara sukarela menjual paten mereka kepada pemerintah, yang dapat menempatkannya di domain publik. 12 Hal itu mempertahankan insentif R&D dinamis yang diciptakan oleh hak kekayaan intelektual tetapi menghindari beberapa distorsi statis yang terkait dengan hak kekayaan intelektual, serta beberapa distorsi dinamis, seperti insentif untuk mengembangkan obat "tiruan" hanya untuk menghindari paten, dan disinsentif untuk mengembangkan obat lanjutan.
AMC untuk vaksin memiliki banyak kesamaan sifat dengan pembelian paten, tetapi tampaknya secara institusional dan politis lebih mudah dilakukan. 13 Ada banyak sekali pekerjaan yang harus dilakukan untuk beralih dari ide akademis ke sesuatu yang dapat diimplementasikan dalam kebijakan. 14 Sangat bagus bahwa hal itu dilakukan untuk vaksin pneumokokus, dan kemudian vaksin itu dikembangkan.
Saya pikir manfaat potensial terbesar dari AMC (Academic Medical Centers) adalah untuk mendorong penelitian dan pengembangan (R&D) untuk penyakit yang sedikit lebih terpencil. Dalam kasus pneumokokus, sudah ada vaksin untuk strain yang umum di negara-negara kaya, tetapi belum ada vaksin yang mencakup semua strain yang relevan bagi banyak negara miskin. Itu adalah tantangan teknologi yang tidak ingin saya remehkan, tetapi itu kurang menantang secara teknologi dibandingkan dengan mengembangkan vaksin yang benar-benar baru. Saya sudah lama tidak mengerjakan ini, meskipun saat ini saya sedang menulis makalah akademis tentang vaksin dan obat-obatan. Tetapi, secara umum, saya pikir ada ruang untuk inovasi kelembagaan untuk menghasilkan mekanisme baru untuk mendorong R&D dan membuat produk-produk tersebut mudah diakses. Saya berharap dapat kembali mengerjakan hal itu suatu saat nanti.
Tim: Apakah Anda memikirkan peran Anda dalam melatih, baik secara langsung maupun tidak langsung, begitu banyak orang yang terlibat dalam melakukan evaluasi acak? Dengan risiko memancing Anda untuk mengatakan beberapa hal yang tidak terlalu rendah hati, apa skenario hipotetis dari dunia tanpa Michael Kremer?
Michael: Sungguh menyenangkan bekerja dengan beberapa mahasiswa pascasarjana dan rekan penulis yang luar biasa selama bertahun-tahun, banyak di antaranya sekarang melakukan hal-hal yang luar biasa. Salah satu hal hebat tentang mendirikan operasi di ICS di Busia adalah melihat orang-orang yang sangat berbakat ini yang mendapatkan pelatihan di lembaga-lembaga terkemuka dan membawa pelatihan itu langsung ke kehidupan di Kenya dan menghasilkan ide-ide fantastis.
Saya rasa itu sangat berharga bagi para siswa, tetapi juga berharga bagi dunia karena banyak dari siswa tersebut kemudian melakukan hal-hal hebat. Saya sangat senang tentang itu.
Tim: Salah satu versi dampak dari gerakan eksperimen lapangan adalah kita telah beralih dari situasi di mana, secara umum, para ekonom serius tidak pergi ke lapangan, ke situasi di mana mereka melakukannya. Apakah itu sesuai dengan pendapat Anda?
Michael: Dunia membutuhkan segala macam penelitian.
Kita membutuhkan peneliti lapangan, ahli teori, dan ahli ekonomi makro. Ada pekerjaan luar biasa yang sedang berlangsung di bidang sejarah ekonomi. Saya pikir gagasan untuk menghabiskan waktu di lapangan dan terlibat dalam uji coba acak dan pekerjaan lapangan lainnya sangat bagus, dan itu adalah salah satu rangkaian teknik dan alat yang sangat penting. Saya juga terbuka untuk pendekatan lain. Saya memang berpikir bahwa, secara umum, akan lebih baik bagi para ekonom pembangunan untuk pernah tinggal dan bekerja di negara-negara berkembang, tetapi itu tidak berarti bahwa setiap proyek harus didasarkan pada pekerjaan lapangan.
Timothy Ogden adalah Direktur Pelaksana dari Financial Access Initiative, sebuah inisiatif penelitian yang mengeksplorasi bagaimana layanan keuangan dapat lebih baik memenuhi kebutuhan dan meningkatkan kehidupan rumah tangga miskin. Ia adalah penulis Experimental Conversations, kumpulan wawancara dengan para ekonom yang melakukan eksperimen lapangan tentang intervensi pengentasan kemiskinan. Ia juga menjabat sebagai anggota dewan GiveWell dan merupakan peneliti senior di Program Peluang Ekonomi Aspen Institute.
Jika Anda memiliki komentar tentang artikel ini, atau ingin berkontribusi dalam diskusi, silakan kirimkan melalui email ke letters@indevelopmentmag.com. Tanggapan Anda akan ditampilkan di bagian surat pembaca.
- Secara spesifik: Ogden, Timothy N., Experimental Conversations: Perspectives on Randomized Trials in Development Economics, © 2017 Massachusetts Institute of Technology, dengan izin dari The MIT Press. ↩︎
- Makalah ini diterbitkan sebagai Glewwe, Paul, Michael Kremer, dan Sylvie Moulin. “Many Children Left Behind? Textbooks and Test Scores in Kenya.” American Economic Journal: Applied Economics 1 (1) (2009): 112–35. doi:10.1257/app.1.1.112.. Meskipun karya ini sangat penting dalam meluncurkan gerakan RCT, makalah ini baru diterbitkan secara resmi pada tahun 2009, jauh setelah banyak makalah RCT berpengaruh lainnya diterbitkan. ↩︎
- Miguel, Edward, dan Michael Kremer. “Cacing: Mengidentifikasi Dampak pada Pendidikan dan Kesehatan dengan Adanya Eksternalitas Pengobatan.” Econometrica 72 (1) (2004): 159–217. doi:10.1111/j.1468-0262.2004.00481.x. ↩︎
- Pascaline Dupas telah terlibat dalam sebagian besar pekerjaan ini, dan beberapa di antaranya dibahas dalam wawancaranya di Experimental Conversations. J-PAL memiliki tinjauan umum tentang topik ini dengan tautan ke banyak makalah di sini . ↩︎
- Lihat khususnya bab 8: “Kesehatan.” Dalam Laporan Pembangunan Dunia 2015: Pikiran, Masyarakat dan Perilaku. Washington, DC: Bank Dunia, 2015. ↩︎
- Eksperimen lapangan program federal AS ini dibahas dalam wawancara dengan Judy Gueron di Experimental Conversations . ↩︎
- PROGRESA dapat dikatakan sebagai pelopor program transfer tunai bersyarat modern, yang memberikan pembayaran kesejahteraan sosial dengan syarat penerima melakukan tindakan spesifik seperti menyekolahkan anak-anak mereka atau mendapatkan vaksinasi. PROGRESA dievaluasi menggunakan uji coba acak yang memanfaatkan kebutuhan untuk meluncurkan program selama beberapa tahun dan menemukan dampak signifikan pada banyak ukuran yang diminati. Keberhasilan PROGRESA menginspirasi adopsi program CCT di banyak negara di seluruh dunia. ↩︎
- Untuk gambaran umum program PROGRESA dan dampaknya, lihat: Skoufias, Emmanuel, dan Bonnie McClafferty. “Apakah PROGRESA Berhasil? Ringkasan hasil evaluasi oleh IFPRI.” Makalah Diskusi FCND 118. Washington, DC, 2001. http://ebrary.ifpri.org/cdm/ref/collection/p15738coll2/id/77118. ↩︎
- Seva Mandir adalah sebuah LSM yang berbasis di Rajasthan, India. LSM ini terlibat dalam sejumlah uji coba terkontrol acak (RCT) pendidikan usia dini serta eksperimen promosi imunisasi (dibahas dalam wawancara dengan Esther Duflo dan Abhijit Banerjee di Experimental Conversations ). ↩︎
- Ini termasuk penelitian di Indonesia tentang pemerasan terhadap pengemudi truk dan korupsi dalam pembangunan jalan serta kesenjangan antara persepsi korupsi dan korupsi aktual. Untuk gambaran umum, lihat Olken dan Pande, “Korupsi di Negara Berkembang” Annual Review of Economics (2012), Olken, Benjamin A., dan Patrick Barron. “Ekonomi Sederhana Pemerasan: Bukti dari Sektor Truk di Aceh.” Journal of Political Economy 117 (3) (2009): 417–52. doi: 10.1086/599707, Olken, Benjamin A. “Pemantauan Korupsi: Bukti dari Eksperimen Lapangan di Indonesia.” Journal of Political Economy 115 (2) (2007): 200–49. doi: 10.1086/517935. ↩︎
- Lihat, misalnya, karya Banerjee dkk. dengan kepolisian Rajasthan, dan karya Olken tentang pembayaran berbasis kinerja untuk penagih pajak di India. ↩︎
- Kremer, Michael. “Pembelian Paten: Mekanisme untuk Mendorong Inovasi.” Jurnal Ekonomi Triwulan 113 (4) (1998): 1137–67. doi:10.1162/003355398555865. ↩︎
- Kremer, Michael, dan Rachel Glennerster. Pengobatan yang Ampuh: Menciptakan Insentif untuk Penelitian Farmasi tentang Penyakit yang Terabaikan. Princeton: Princeton University Press, 2004. ↩︎
- Ini mencakup tidak hanya makalah ekonomi asli, tetapi juga sebuah buku ( Strong Medicine ) dan kelompok kerja di Center for Global Development sebelum sebuah organisasi dibentuk dan didanai untuk mengelola AMC. Lihat: Levine, Ruth, Michael Kremer, dan Alice Albright. Making Markets for Vaccines: Ideas to Action. Washington, DC: Center for Global Development, 2005. ↩︎