Menggunakan Bukti Menyeluruh: Meningkatkan Implementasi Kebijakan Menggunakan bukti untuk melanggar acuan : mengidentifikasi isu didepan

berlangsung tentang keinginan dan kepraktisan menggunakan RCT untuk menilai efektivitas berbagai intervensi sosial Chalmers, 2005; Hammersley, 2005. Pengetahuan tentang apa yang berhasil dalam kebijakan sosial cenderung sementara dan sangat tergantung pada konteks. Hal ini telah menyebabkan panggilan untuk pendekatan realis untuk evaluasi kebijakan sosial Pawson dan Tilley, 1997, yang dimulai dengan teori penjelasan kausal dan memberikan penelitian tugas teori pengujian bagaimana hasil program yang dihasilkan oleh mekanisme khusus dalam konteks tertentu. Pengembangan teori mengacu pada pengetahuan pemangku kepentingan dalam proses kebijakan, membuat mereka untuk mengartikulasikan pandangan mereka tentang apa yang bekerja untuk siapa dan dalam situasi. Evaluasi berikutnya melibatkan membuat perbandingan antar dan intra-program untuk melihat mana konfigurasi pada konteks mekanisme-hasil yang berkhasiat. Terlepas dari metodologi evaluasi yang digunakan, tantangan utama yang dihadapi mereka yang bertugas mengevaluasi keefektifan adalah sulitnya mengukur hasil dari banyak intervensi sosial lihat Bab 11, yang hanya benar-benar dipahami oleh mereka yang mengalami mereka. Jadi pengetahuan tentang apa yang berhasil cenderung dipengaruhi oleh sangat macam pertanyaan yang diajukan, yang diminta, ketika mereka diminta, dan sangat tergantung pada konteksnya.

22.2.3. Menggunakan Bukti Menyeluruh: Meningkatkan Implementasi Kebijakan

Studi dampak perlu dilengkapi dengan penelitian untuk mengeksplorasi kemajuan suatu tujuan, untuk menilai biaya terlibat dalam intervensi, untuk memahami proses yang terlibat dan dari ini, dapat dipelajari mengenai peningkatkan implementasi kebijakan. Hal ini bisa disebut ketat, dimana pemantauan dan evaluasi itu menyeluruh pada kebijakan atau program. Terdapat tradisi panjang dalam mengevaluasi masalah proses dan pelaksanaan, dengan menggunakan berbagai metode penelitian dan pendekatan. Sebagai contoh, model penelitian tindakan melibatkan praktisi dalam merancang dan melaksanakan penelitian. Salah satu kekuatan dari pendekatan ini yaitu praktisi tidak harus menunggu laporan penelitian akhir, tetapi di dalam posisi untuk mengintegrasikan pembelajaran ke dalam pekerjaan mereka yang muncul - lihat contoh kasus 22.2.

22.2.4. Menggunakan bukti untuk melanggar acuan : mengidentifikasi isu didepan

20 | P a g e Di samping peningkatan penekanan dalam membangun sebuah bukti dasar untuk suatu kebijakan dan praktik, telah terjadi pengakuan bahwa peneliti itu malah terus mengeksplorasi ide-ide lebih luas, berbeda dengan apa yang didefinisikan oleh agenda kebijakan saat ini - yakni berpikir cerah, tetap menjaga pandangan ‘gambaran yang lebih besar atau luas, mencari lebih banyak ide-ide dan masalah, dan Berpikir Tantangan. Cara di mana penelitian murni dapat membantu menyusun pemikiran saat ini, diilustrasikan oleh desain lelang lisensi ponsel generasi ketiga di Inggris: Perintis penelitian pada teori permainan di Pusat Pembelajaran Ekonomi dan Evolusi Sosial, di Universitas College London, digunakan pada tahun 2000 untuk merancang gaya lelang yang baru untuk lisensi ponsel, dimana bisa meningkatkan sampai 2 Juta euro pada Aset Inggris, lebih besar dari apa yang diharapkan. Dewan penelitian dan organisasi independen, seperti Joseph Rowntree Foundation di Inggris dan Yayasan Rockefeller di Amerika Serikat, saat ini mengambil peran utama dalam mendukung dan memelihara penelitian. Secara keseluruhan, kita dapat melihat penelitian dan evaluasi dapat digunakan untuk berbagai tujuan, masing-masing memerlukan teknik bukti pengumpulan dan metodologi agak berbeda lihat Tabel 22.1. TABEL 22.1. Metode dan kegunaan dari bukti Tujuan Metode dan pendekatan yang mungkin, mencakup: Mengidentifikasi kunci masalah Megulas literatur yang ada, survei, kelompok diskusi, wawancara Memahami pandangan stakeholder Para Pemangku Kepentingan yang terkait Wawancara, diskusi kelompok, survei Mencari faktor kontekstual peluang dan biaya Penilaian dampak, analisis biaya manfaat, wawancara dan diskusi kelompok menyiapkan panduan bagi mereka yang menerapkan kebijakan Mensintesa bukti terbaik yang tersedia, konsultasi dengan pemangku kepentingan, Analisis biaya dan manfaat 21 | P a g e Mengevaluasi efektivitas dari intervensi kebijakan Studi Eksperimental dan quasi-eksperimental, evaluasi ekonomi, evaluasi realis, Memahami apa yang dikerjakan, dengan siapa dan dalam keadaan apa Evaluasi Pelaku yang melakukan pekerjaan tersebut Mengevaluasi proses yang terlibat Studi kasus, observasi, dokumenter Mengeksplorasi isu-isu yang terlibat dalam pelaksanaan kebijakan analisis, wawancara, diskusi dan survei kelompok Memonitor kemajuan Manajemen data, survei dan wawancara Menghasilkan ide-ide dan alternatif baru , Inti masalah untuk pertimbangan masa depan penelitian ‘Langit-cerah‘ Penelitian yang Jelas , sintesis penelitian, wawancara, diskusi kelompok yang ada Contoh Kasus 22.2. Tindakan Penelitian Dalam Dua Tingkat Kemitraan Kerja Dalam wilayah tingkat dua pemerintah daerah di Inggris, kemitraan lokal strategis LSP telah didirikan di keduanya yakni di tingkat daerah dan kabupaten. Hal ini telah menciptakan beberapa ketidakpastian tentang peran masing-masing kabupaten dan kabupaten yang berbasis LSP, hubungan mereka dan penyusunannya mungkin diperlukan untuk menghindari tumpang tindih, duplikasi atau persaingan. Akibatnya, suatu tindakan pembelajaran ALS didirikan, difasilitasi dan didukung sebagai bagian dari program tindakan penelitian dan evaluasi yang disponsori oleh Departemen Masyarakat dan Pemerintah Daerah. Tujuannya untuk belajar tentang praktek yang ada, memahami dan menjelaskan berbagai hambatan, kesempatan, kerjasama tim, dan untuk mempertimbangkan praktek yang baik dalam kaitannya dengan dua-tingkat kerja. Dalam tujuan yang luas ini, ALS mendefinisikan sendiri program kerjanya, yang fokus pada isu-isu di mana anggota-anggotanya berpikir usaha-usaha mereka itu harus terkonsentrasi. Dengan demikian agendanya ditetapkan oleh LSP sendiri, bukan ditentukan oleh tim peneliti atau sponsor. Kesimpulannya, ALS itu membantu dalam perumusan Saran pemerintah untuk LSP di daerah tingkat dua. Namun, mau tidak mau, para peserta di ALS diambil dari daerah di mana terdapat kepercayaan antara daerah dan kabupaten, yang pada Intinya terdapat kesediaan untuk 22 | P a g e bekerja sama. Bimbingan pemerintah yang lebih kuat mungkin diperlukan di daerah-daerah di mana kolaborasi tidak terjadi. APA SAJA HAMBATAN ATAS PENINGKATAN PEMANFAATAN BUKTI? Banyak yang berpendapat bahwa itu adalah jelas bahwa kebijakan dan manfaat praktek dari yang lebih daripada kurang diinformasikan oleh bukti Hammersley, 2001. Namun, penelitian pemanfaatan seringkali menyatakan keprihatinan tentang penggunaan di bawah-jelas penelitian Weiss, 1998. Bagaimana seharusnya masalah ini sedikit digunakan ditangani, keberadaan temuan tentang efektifitas yang baik tidak diterapkan, atau tidak diterapkan dengan sukses? Dan, sebaliknya, seharusnya kami juga khawatir tentang terlalu sering menggunakan penelitian, misalnya penyebaran cepat temuan tentatif, dan sekitar penyalahgunaan, terutama di mana bukti efektivitas ambigu lihat Contoh Kasus 22.3 23 | P a g e Contoh 22.3 INSIDEN YANG MENCURIGAKAN DARI SEBUAH PENELITIAN DI JURNAL Pada hari Kamis, 8 Juli 2004, London Evening Standard menjalankan berita utama pada penelitian anak-anak di penitipan anak dan respon waspada. Dari pemerintah .Selama hampir tiga minggu ada kebingungan menekan kepentingan, sebagian besar seputar isu apakah anak-anak yang sangat muda lebih agresif jika terpelihara oleh para penajga , bukan oleh ibu mereka. Apa yang kita amati terjadi dalam insiden aneh ini penelitian di berita? Itu Pasti, banyak kontribusi untuk debat publik. Tapi juga kontribusi di mana semua orang - wartawan, pelobi, politisi dan peneliti - digunakan semua trik retoris dalam buku: dimuat kata, kutipan selektif, reframing masalah, atribusi motif pantas lawan, generalisasi dari pengalaman pribadi, tuduhan keliru, penyembunyian Nutley et al. 2007 dalam peninjauan cara meningkatkan dampak penelitian menemukan bukti dari sejumlah hambatan dan pengaktif peningkatan penggunaan penelitian lihat Kotak 22.1. Masalah di bawah-pemanfaatan sering dianggap berasal dari kenyataan bahwa para peneliti dan pengguna penelitian pembuat kebijakan dan praktisi menempati dunia yang berbeda: mereka beroperasi pada rentang waktu yang berbeda, menggunakan bahasa yang berbeda, memiliki kebutuhan yang berbeda dan menanggapi sistem insentif yang berbeda 24 | P a g e Locock dan Boaz 2004. Hal ini menyebabkan panggilan untuk strategi penyebaran yang lebih baik untuk menjembatani kesenjangan antara dua komunitas dan memungkinkan penelitian yang akan dikomunikasikan secara efektif kepada para pembuat kebijakan dan praktisi. Bagaimanapun , konseptualisasi mengenai masalah berada di dalam bahaya dari memainkan secara berlebihan peran yang potensial dari bukti penelitian dan memainkan peran dalam bentuk yang lain dari pengetahuan dan pengalaman dalam mengembangkan kebijakan dan praktek. Pandangan ‘dua komunitas’ juga dalam bahaya dalam menyederhanakan secara berlebihan tatanan poltik dengan menolak keterlibatan pihak lain dalam pengembangan kebijakan. Delafons 1995 menunjukkan bahwa sumber potensi untuk ide-ide kebijakan baru termasuk: partai politik, menteri, DPR, kelompok penekan, pelobi, badan- badan internasional, akademisi dan masyarakat penelitian. Kelompok-kelompok ini dapat menyusun bukti penelitian untuk mengembangkan ide-ide mereka, tetapi bentuk-bentuk pengetahuan dapat memainkan peran yang lebih menonjol. Misalnya, Menteri kemungkinan besar akan dipengaruhi tidak hanya oleh penelitian formal, tetapi juga oleh pandangan konstituen, hasil jajak pendapat, manifesto partai di mana ia terpilih, pembelajaran formal nya, dan pengetahuan yang didapat baik melalui kerja dan pengalaman pribadi. Akibatnya, salah satu masalah yang dihadapi para pengambil keputusan, adalah volume bukti semata yang tersedia bagi mereka. Seperti John Maynard Keynes terkenal menyimpulkan, tidak ada pemerintah dibenci lebih dari diinformasikan dengan baik; karena membuat proses tiba di keputusan yang jauh lebih rumit dan sulit Skidelsky, 1992. Selain informasi yang berlebihan, pengambil keputusan harus bergulat dengan politik dan faktor organisasi, terutama kebutuhan untuk mewakili semua 25 | P a g e PENGGUNAAN PENELITIAN SIFAT PENELITIAN Penelitian lebih mungkin untuk digunakan • yang berkualitas tinggi dan berasal dari sumber yang dapat dipercaya; • memberikan temuan yang jelas dan tidak terbantahkan; • telah ditugaskan oleh, atau membawa, dukungan politik tingkat tinggi; • sejalan dengan prioritas lokal, kebutuhan dan konteks; • tepat waktu dan relevan bagi para pembuat kebijakan dan praktisi persyaratan; • disajikan dalam cara user-friendly - ringkas, jargon-bebas dan menarik secara visual. Karakteristik pribadi dari peneliti dan pengguna potensial penelitian • Pembuat kebijakan dan praktisi dengan tingkat pendidikan Konteks Untuk Penggunaan Penelitian konteks memainkan peran penting dalam membentuk penyerapan penelitian;  Pada konteks kebijakan , penelitian lebih dapat digunakan ketika:  itu sejalan dengan ideologi saat ini dan minat individu dan agensi.  temuannya sesuai dengan cara berfikir dan bertindak atau informasi lainnya didalam lingkungan kebijakan.  sistem politik yang terbuka yang ada  lembaga kepentingan dalam proses pembuatan kebijakan. Semua pemangku kepentingan cenderung menggunakan bukti baik secara strategis dan politis - kita dapat melihat hal ini sebagai bagian dari permainan-permainan mereka Perri 6, 2002. Perlu ditekankan bahwa, ketika sedang tergoda untuk berpikir bukti yang digunakan secara langsung untuk membuat keputusan yang rasional dan informasi, kenyataannya sering jauh lebih berantakan dan terang-terangan politik daripada ini. Setidaknya ada empat cara di mana bukti dapat mempengaruhi kebijakan lihat Kotak 22.2, dan penggunaan langsung penelitian dalam pengambilan keputusan gunakan instrumental sebenarnya cukup langka. Hal ini kemungkinan besar di mana temuan penelitian non- kontroversial, hanya memerlukan perubahan terbatas dan akan dilaksanakan dalam lingkungan yang mendukung: dengan kata lain, ketika mereka tidak mengganggu status quo Weiss, 1998. Secara umum, ada penyebab lebih untuk bersikap optimis tentang penggunaan bukti jika pemanfaatan penelitian secara lebih luas ditentukan kemudian dapat digunakan dalam pengambilan keputusan, sebagai dampak dari penelitian yang seringkali lebih secara tidak langsung daripada ini. 22.4. BAGAIMANA PEMBELAJARAN BERBASIS BUKTI ITU DIGUNAKAN?