A.    Latar Belakang

Dalam suatu kebijakan, khususnya kebijakan pendidikan banyak aspek yang mempengaruhi keberhasilan keberlangsungan prosesnya, salah satunya adalah evaluasi. Stufflebeam dan Shinkfield (1985) menyatakan bahwa:

Evaluation is the process of delineating, obtaining and providing descriptive and judgemental information about the worth and merit of some objects’s goals, design, implementation, and impact in order to guide decision making, serve needs for accountability and promote understanding of the involved phenomena.

Menurut rumusan tersebut, maka inti dari evaluasi adalah penyediaan informasi yang dapat dijadikan sebagai bahan pertimbangan dalam pengambilan keputusan. Brikerhoff dalam Widoyoko (2009) juga menjelaskan bahwa evaluasi merupakan proses yang menentukan sejauh mana tujuan dari suatu program pendidikan dapat dicapai. Terdapat tujuh elemen yang harus dilakukan dalam melakukan evaluasi, yaitu: (1) penentuan fokus yang akan dievaluasi, (2) penyusunan desain evaluasi, (3) pengumpulan informasi, (4) analisis dan interpretasi informasi, (5) pembuatan laporan, (6) pengelolaan evaluasi dan (7) evaluasi untuk evaluasi.



Dalam pengertian tersebut menunjukkan bahwa dalam melakukan evaluasi, tahap awal yang perlu dilakukan evaluator adalah menentukan fokus yang akan dievaluasi dan menentukan desain atau model evaluasi yang akan digunakan. Beberapa model evaluasi telah banyak dikembangkan, salah satunya dalah Model Evaluasi Bebas Tujuan (Goal Free Evaluation Model – GFE Model) yang digagas pertama kali oleh Michel Scriven. Beliau adalah seorang pakar filsafat ilmu pengetahuan yang telah banyak menyumbangkan gagasannya dalam bidang evaluasi. Michel Scriven banyak mengkritisi konsep-konsep evaluasi yang pada umumnya selalu memfokuskan pada tujuan-tujuan yang ingin dicapai oleh pengembang kurikulum, bukan memfokuskan pada kebermanfaatan dari hasil proses atau produk pembelajaran.

B.    Penjelasan dan Konteks

Inti dari metode

1. Apa?

Goal Free Evaluation (GFE) menyimpang dari pendekatan evaluasi lainnya, yang sebagian besar berbasis pada tujuan, di mana, jika diterapkan secara ketat, evaluator pada awalnya tidak menyadari tujuan yang seharusnya dilayani oleh objek studi. Dalam interpretasi metode yang kurang ketat, penilai tidak memperhitungkan tujuan tersebut, tetapi mungkin menyadarinya. Akibatnya, evaluator perlu melihat apa yang sebenarnya dilakukan oleh objek studi (program kebijakan), daripada berkonsentrasi pada apa yang diasumsikan atau diharapkan untuk dilakukan. Goal Free Evaluation, ruang lingkup visi evaluator (dan, dengan demikian, objek studi evaluasi) sengaja dibuat seluas mungkin. Hal ini tidak berdampak pada jumlah perhatian yang diberikan pada tujuan (kebijakan formal). Bagaimanapun, jika kebijakan menghasilkan efek yang diharapkan, maka ini akan terjadi dari evaluasi. Namun, jika program kebijakan gagal mencapai seperti yang diharapkan, atau jika memiliki efek lain (tak terduga), maka hal ini juga akan muncul dari studi. Jika penilai mampu mengevaluasi program kebijakan sepenuhnya secara independen, tidak akan ada kesepakatan sebelumnya mengenai kriteria evaluasi yang akan diterapkan. Namun, penilai jarang benar-benar independen. Jika studi telah dilakukan, pendekatan terbaik yang mungkin adalah menggabungkan kriteria evaluasi yang berbeda (yaitu kriteria yang dianggap penting oleh pihak yang meminta evaluasi dan yang dianggap penting oleh pemangku kepentingan kebijakan, atau populasi yang terkena dampak).

2. Kapan?

Goal Free Evaluation menilai efek program kebijakan berdasarkan kriteria evaluasi. Artinya, metode tersebut hanya dapat diterapkan ex post, setelah implementasi program kebijakan.

3. Keuntungan dan Kerugian?

Salah satu argumen utama yang mendukung metode ini adalah bahwa, dalam bentuknya yang paling murni, memungkinkan evaluator untuk mendeteksi efek samping. Alasan di balik pendekatan ini adalah bahwa seorang evaluator yang tidak perlu memperhatikan tujuan kebijakan akan cenderung melihat lebih teliti untuk kemungkinan efek dan, seperti kasusnya, efek samping. Keuntungan penting kedua adalah bahwa penilai dapat memilih kriteria evaluasi secara independen (setidaknya, dalam varian metode yang ketat), dan tidak dibatasi oleh siapa pun yang telah menugaskan studi atau berdasarkan kriteria yang ditentukan oleh tujuan kebijakan. Scriven (1990, p. 180) merangkum keuntungan lainnya:

  • GFE menghindari upaya yang mahal dan memakan waktu untuk mengidentifikasi dan mengevaluasi tujuan kebijakan (tidak seperti dalam kasus evaluasi teori program; lihat Bagian 3.2). Akibatnya, lebih banyak perhatian dapat diberikan pada efek kebijakan.
  • GFE memiliki dampak yang lebih terbatas pada aktivitas kebijakan. Karena penilai terpisah dari pembuat kebijakan dan lebih dekat dengan kelompok sasaran dan pemangku kepentingan lainnya, interaksi antara penilai dan pembuat kebijakan menjadi lebih sedikit. Akibatnya, para pembuat kebijakan ini jauh lebih sedikit terlibat dalam studi evaluasi dibandingkan dengan metode lainnya.
  • GFE memperhitungkan perubahan kebutuhan dan tujuan. Karena GFE tidak mengambil tujuan formal sebagai titik awal, GFE dapat memasukkan ekspektasi dan kebutuhan kebijakan aktual dalam evaluasi.
  • GFE tidak terlalu rentan terhadap bias atau dipengaruhi oleh pembuat kebijakan karena interaksi antara evaluator dan pembuat kebijakan lebih sedikit.
  • Seseorang dapat, setiap saat, beralih ke evaluasi berbasis tujuan. Sebaliknya, tidak mungkin untuk beralih dari evaluasi berbasis tujuan ke pendekatan bebas tujuan. Dalam evaluasi berbasis tujuan, penilai bekerja sesuai dengan tujuan kebijakan. Dengan kata lain, tujuan tersebut diketahui oleh evaluator, sehingga dia selanjutnya tidak dapat dilepaskan dari pengetahuan ini.
  • Ada kemungkinan kecil bahwa evaluasi akan dipengaruhi oleh kecenderungan (tidak sadar) untuk mencoba menyenangkan klien yang telah menugaskan studi. Karena penilai tidak menyadari tujuan kebijakan, ia menjalankan risiko yang lebih kecil untuk mengubah evaluasi yang bias secara positif.

Kerugian dari Goal Free Evaluation adalah sulitnya menciptakan situasi di mana penilai sama sekali tidak menyadari tujuan kebijakan. Oleh karena itu, interpretasi GFE yang tidak terlalu ketat sering kali merupakan pencapaian tertinggi. Dalam pendekatan ini, kriteria evaluasi tetap dipilih oleh evaluator, tetapi ia juga mengetahui tujuan kebijakan tersebut. Kelemahan lain dari Goal Free Evaluation adalah bahwa metode ini dapat menimbulkan kebingungan terkait dengan kriteria kebijakan yang harus dievaluasi. Dalam evaluasi klasik (berbasis tujuan), pencapaian tujuan kebijakan formal dianggap sebagai kriteria evaluasi utama. Dalam kasus tanpa tujuan evaluasi evaluasi, kriteria lain dilibatkan: kriteria yang diajukan oleh evaluator dan kriteria yang disarankan oleh pemangku kepentingan kebijakan. Kriteria ini bisa bermacam-macam dan, terlebih lagi, kontradiktif.



1. Konteks Historis

Goal Free Evaluation diperkenalkan oleh Scriven pada tahun 1972. Dia mengusulkan metode ini karena dua alasan. Pertama, dia menganggap lebih penting untuk memperhatikan semua efek nyata dan nyata daripada efek yang diperkirakan (yaitu hasil kebijakan yang dibayangkan). Kedua, dia melihat GFE sebagai cara untuk menghindari masalah evaluator klasik karena kurangnya tujuan yang jelas dan tegas.

2. Konteks Penelitian

Tujuan merupakan metode penelitian evaluasi yang penting karena metode ini menimbulkan salah satu perdebatan paling menonjol dalam komunitas evaluasi. Perdebatan tentang posisi tujuan formal dalam evaluasi program kebijakan baru benar-benar muncul setelah pengenalan pendekatan ini.

Terlepas dari pentingnya Goal Free Evaluation dalam diskusi akademis tentang evaluasi kebijakan, GFE tidak terlalu populer di kalangan evaluator dan komisaris studi semacam itu. Ini tidak populer di kalangan evaluator karena kurangnya struktur yang jelas, sementara itu tidak populer di antara studi evaluasi commissioning karena tidak memberikan perhatian khusus pada tujuan kebijakan dan karena menimbulkan potensi ancaman untuk mengungkap tujuan implisit dan efek samping kebijakan. . Sebagai kompromi, seseorang dapat memilih bentuk hibrida, seperti evaluasi front-end tanpa tujuan. Di sini, seseorang tetap menggunakan GFE hingga laporan evaluasi sementara. Kemudian, setelah umpan balik diberikan, seseorang melanjutkan dengan pendekatan berbasis tujuan dan memasukkan tujuan kebijakan dalam evaluasi dan, akibatnya, dalam laporan evaluasi akhirnya. Karena GFE menerapkan kebutuhan kebijakan daripada tujuan kebijakan sebagai kriteria, GFE terkait erat dengan filosofi analisis kebutuhan.

C.     Metodologi

Langkah-langkah Goal Free Model terdapat empat langkah yaitu :

  1. Desain evaluasi

Pertama, desain evaluasi dikerjakan. Dengan kata lain, pemilihan dilakukan terhadap metode dan teknik untuk mengevaluasi objek yang dimaksud. Rancangan evaluasi perlu mempertimbangkan cara pengumpulan dan analisis data. Lebih lanjut, semua (sub) langkah dalam pengumpulan dan analisis data harus dimasukkan ke dalam perencanaan operasional studi evaluasi. Perencanaan ini idealnya mencakup informasi tentang aspek keuangan dan pengeluaran waktu.

  1. Pemilihan penilai

Ketika memilih penilai, penting untuk diingat bahwa ia harus dapat memulai evaluasi program kebijakan tanpa pengetahuan sebelumnya tentang tujuan kebijakan formal. Evaluator, hampir menurut definisi, bukanlah ahli dalam topik kebijakan tempat evaluasi dibuka. Dengan cara ini, jarak maksimum dijaga antara penilai dan tujuan yang ingin dicapai. Penilai adalah bagian dari tim penilai, yang masing-masing memiliki bidang keahlian tematik. Ini diperlukan karena evaluator awal seharusnya mengevaluasi kebijakan tanpa pengetahuan sebelumnya tentang kebijakan yang akan dipertimbangkan. Oleh karena itu, agar dapat menginterpretasikan temuan secara memadai, selanjutnya perlu menghadirkan anggota tim yang memiliki pengetahuan di bidang kebijakan yang bersangkutan. Penilai sebaiknya berpengalaman. Ini direkomendasikan karena dia harus dapat mengandalkan keahlian metodologis mereka sendiri selama eksplorasi efek (samping).

  1. Evaluasi Goal Free

Langkah ini mencakup studi atau evaluasi yang sebenarnya. Teknik pengumpulan dan analisis data yang dipilih pada langkah 1 (desain evaluasi; lihat Kotak 3.5) sekarang diterapkan. Bergantung pada efek kebijakan yang diidentifikasi oleh penilai, kriteria dirumuskan untuk menilai hasil ini. Menurut Scriven (1991), kebutuhan pemangku kepentingan harus didahulukan dalam hal ini.

  1. Perumusan rekomendasi kebijakan

Langkah terakhir adalah merumuskan rekomendasi kebijakan. Ini terjadi atas dasar hasil evaluasi. Karena metode evaluasi ini memperhitungkan dari semua efek dan konsekuensi kebijakan, rekomendasi kebijakan mungkin diharapkan lebih luas dan lebih dalam daripada kasus evaluasi berbasis tujuan.



D.    Kesimpulan

Model evaluasi goal free merupakan model evaluasi yang dilakukan tanpa mempertimbangkan tujuan dari objek studi. GFE memungkinkan evaluator untuk memilih kriteria evaluasi secara independen dan tidak dibatasi oleh siapapun atau berdasarkan kriteria yang ditentukan oleh tujuan kebijakan. Keuntungan dari GFE antara lain; tidak terlalu memerlukan waktu dan biaya yang banyak, pembuat kebijakan lebih sedikit terlibat dalam proses evaluasi, GFE memperhitungkan perubahan kebutuhan dan tujuan, GFE rentan terhadap bias, evaluator dapat beralih ke evaluasi berbasis tujuan, sedangkan kerugian dari GFE adalah sulitnya menciptakan situasi dimana evaluator sama sekali tidak menyadari tujuan kebijakan. Selain itu, metode ini dapat menimbulkan kebingungan terkait dengan kriteria kebijakan yang harus dievaluasi.

Terdapat empat langkah dalam melakukan evaluasi dengan goal free model:

  1. Desain Evaluasi, yaitu evaluator membuat rancangan evaluasi termasuk menentukan metode pengumpulan data, langkah-langkah pengumpulan data, teknik analisis data, serta informasi terkait keungan dan dan pengeluaran waktu.
  2. Pemilihan penilai, yang perlu diingat ketika memilih penilai adalah ia harus dapat memulai evaluasi program kebijakan tanpa mengetahui tujuan kebijakan formal. Penilai sebaiknya adalah orang yang berpengalaman mengenai evaluasi.
  3. Evaluasi Goal Free, yaitu menerapkan teknik pengumpulan data dan analisis data yang telah dirancang pada langkah 1
  4. Perumusan rekomendasi kebijakan berdasarkan hasil evaluasi, rekomendasi yang diberikan diharapkan dapat lebih luas daripada kasus evaluasi berbasis tujuan karena metode evaluasi goal free memperhitungkan semua efek dan konsekuensi kebijakan.




DAFTAR PUSTAKA

Sykes, et.al. 2009. Handbook of Education Policy Research. American Educational Research Association

Widoyoko, E. P. (2009). Evaluasi program pembelajaran. Yogyakarta: pustaka pelajar, 238.

 

By admin

Comments are closed.