Reliabilitas interobserver adalah sejauh mana dua atau lebih pengamat menyepakati langkah-langkah mereka dari subjek yang sama pada waktu yang sama. Sebagai contoh, jika dua orang mengukur lemak tubuh menggunakan kaliper lipatan kulit, orang akan menilai tingkat kesepakatan tentang langkah-langkah dari subyek yang sama. Pelatihan dan kalibrasi instrumen akan dilanjutkan sampai konsistensi dalam tindakan dicapai menyeberangi pengamat. Reliabilitas interobserver adalah sejauh mana pengamat yang sama konsisten dalam langkah-langkah dari subjek yang sama dengan waktu yang berbeda. Sebuah contoh dari tingkat kesepakatan ganda menggunakan lipatan kulit tekanan darah pengukuran yang dilakukan oleh salah satu tester pada subjek yang sama. Seperti sebelumnya, jika langkah-langkah yang tidak konsisten, pelatihan tester dan pemeriksaan integritas instrumen akan dilakukan. Uji tes ulang relibility juga disebut stabilitas, adalah sejauh mana instrumen, seperti tes pengetahuan atau skala kepercayaan kesehatan, memberikan skor yang sama pada dua waktu yang berbeda. Waktu harus cukup dekat sehingga tidak ada perubahan nyata dalam tindakan akan terjadi dalam mata pelajaran. Konsistensi internal mengukur sejauh mana item komponen dalam instrumen serupa atau mengukur konsep yang sama. Misalnya, ketika tes pengetahuan secara internal konsisten, orang-orang yang berbuat baik pada skor total juga cenderung untuk berbuat lebih baik pada setiap item tes seluruh tes dibandingkan dengan subjek yang melakukan buruk. Beberapa bentuk Reliabilitas adalah sejauh mana dua bentuk setara istrument yang memberikan hasil yang sebanding ketika diadministrasikan dengan subyek yang sama pada waktu yang sama. Sebagai contoh, tiga adalah dua bentuk yang berbeda mengukur locus of control kesehatan, dan skor dari dua bentuk memberi terbukti strongy berkorelasi. Berpisah setengah keandalan adalah simila konseptual ke beberapa bentuk relianility. Hal ini diperoleh secara acak menugaskan item dalam instrumen untuk dua set nilai dan memeriksa hubungan antara mereka. Windsor nd rekan (1994) telah mengidentifikasi tujuh sumber umum unreliaility, hari alami untuk variabilitas hari, istructions, instrumen, orang yang membuat pengukuran, lingkungan, responden, dan masalah manajemen data yang. Jika responden tidak memahami instruksi, mereka mungkin menjawab kuesioner dengan cara yang berbeda. Item instrumen mungkin tidak jelas worded atau mungkin pada tingkat membaca di atas bahwa responden. Sebuah instrumen dapat bekerja buruk, misalnya caliper lipatan kulit wth sekrup longgar, memberikan ukuran yang berbeda pada waktu yang berbeda. Orang yang mengambil langkah-langkah mungkin ceroboh dalam penggunaan instrumen. Lingkungan untuk pengujian mungkin terlalu hangat atau dingin atau terlalu berisik. Responden mungkin sakit atau mudah terganggu. Coding kesalahan atau kesalahan entri data dapat membahayakan data. Masing-masing sumber kesalahan harus diminimalkan.

Kriteria dibandingkan Norm Referensi Tindakan Dengan alat uji dewa, adalah mungkin untuk menentukan dengan keyakinan memadai jika siswa meningkat pada beberapa ukuran dan, jika mereka tidak meningkatkan, persentase kenaikan perkiraan mereka. Sementara hal ini berguna untuk mengetahui apakah atau tidak siswa yang membaik, juga importnant untuk mengetahui bagaimana mereka dibandingkan dengan beberapa standar yang diakui. Dua standar, norma dan kriteria, yang digunakan dalam penilaian pendidikan. Pengukuran norma direferensikan memberikan status terperiksa dalam kaitannya dengan status orang lain sedang diuji, sedangkan pengukuran kriteria direferensikan berkaitan kinerja terperiksa untuk jelas perilaku set, tanpa mengacu pada status lain sedang diuji. Dengan demikian, norma-norma yang relatif terhadap orang lain sedang diuji, sedangkan kriteria yang mutlak dan memberikan gambaran yang jelas tentang apa yang examineee bisa dan tidak bisa lakukan. Pengukuran kriteria direferensikan lebih disukai daripada norma direferensikan pengukuran dalam evaluasi karena hasilnya jelas ditafsirkan dan tidak tergantung pada perbandingan dengan orang lain yang telah diuji. Dalam norma direferensikan pengujian, terperiksa dibandingkan dengan kinerja orang lain. Tes prestasi akademik dalam membaca atau matematika, misalnya, secara luas diadministrasikan kepada anak-anak di seluruh bagian bangsa Hal ini sederhana untuk menentukan rata-rata untuk masing-masing kelas leveland khususnya distribusi khas skor di atas nad bawah tingkat ini. Ketika beberapa ribu anak yang diuji pada variabel seperti kemampuan membaca, skor biasanya membentuk distribusi normal, dengan banyak anak-anak di atas rata-rata atau Rata-rata seperti di bawah ini. Dalam distribusi normal, nilai rata-rata (atau rata-rata numerik dari semua nilai) adalah sama dengan median (titik tengah dari semua nilai) dan persentil ke-50. Rata-yang menempatkan anak tertentu di atas 60 persen dari kelompok disebut persentil ke-60, sedangkan skor yang plces anak di atas hanya 40 persen dari kelompok adalah persentil ke-40, dan seterusnya sepanjang distribusi skor. Dengan norma-norma seperti availabale sebagai referensi, sekolah kemudian dapat menetapkan standar untuk membaca prestasi. Demikian pula, lembaga kesehatan masyarakat bisa memeriksa tingkat perilaku kesehatan atau kesehatan penduduk mereka melayani dan membandingkan pengalaman bahwa dengan norma-norma bagi bangsa ini untuk melihat apakah nilai dari populasi mereka berada di atas atau di bawah rata-rata. Dalam pengukuran kriteria direferensikan, individu dibandingkan dengan ukuran standar atau kriteria, bukan pada kinerja orang lain. Progra objctives atau tujuan untuk kesehatan ditetapkan berdasarkan standar mutlak kinerja, tidak refernece tradisi, pengalaman sejarah atau norma-norma nasional. Berbeda dengan norma direferensikan diuji, kriteria referencig membutuhkan menentukan terlebih dahulu berapa skor yang diperlukan untuk memenuhi standar. Saya perilaku promosi kesehatan atau tindakan physilogical terkait dengan risiko penyakit atau kematian mungkin memberikan standar. Misalnya, kolesterol serum lebih besar dari 200 mg / dl atau ukuran tekanan darah lebih dari 140/90 mmHg berhubungan dengan peningkatan risiko penyakit jantung. Komputerisasi apraisal risiko kesehatan memberikan ukuran kesehatan kriteria skala luas berdasarkan probabilitas kematian. Kriteria mungkin diatur dalam hubungan dengan kegunaan praktis. Sebagai contoh, tingkat keterampilan untuk resusitasi cardiopulmonary (CPR) harus mencapai tingkat yang diperlukan untuk menjadi efektif dalam situasi pertolongan pertama khas, Namun gradasi halus keterampilan melampaui tingkat ini memiliki nilai yang kecil. Berikut standar ditentukan oleh penilaian ahli berdasarkan pengetahuan tentang apa yang berhasil bukan oleh referensi untuk setiap kinerja kelompok. A techer shop dapat membentuk lima aturan keselamatan untuk foloow ketika menggunakan alat-alat listrik dan menuntut siswa untuk skor 100 persen pada lima butir kuis sebelum mengizinkan mereka untuk menggunakan alat. Analisis Data Jenis data yang akan dikumpulkan, prosedur untuk mengumpulkan dan memasukkannya ke dalam bentuk yang dapat digunakan untuk analysus, dan analisis statistik yang akan digunakan untuk menjawab qyestions evaluasi harus diputuskan sebagai evaluasi direncanakan. Tiga empat tingkat pengukuran nominal, ordinal, interval, dan rasio. Tingkat pengukuran Data nominal dan ordinal yang categprical, unit mereka kategori dengan arti numerik, Interval dan data rasio adalah numerik, dengan satuan standar pengukuran. tindakan Interval dapat ditambahkan dan dikurangi. Namun, tidak seperti langkah-langkah rasio yang memiliki nol mutlak, mereka tidak dapat dikalikan atau membagi. Semua operasi aritmatika dapat pperfomed pada langkah-langkah rasio. Statistik yang berbeda sesuai untuk tingkat ini pengukuran. Tabel 8.6 memberikan ciri-ciri tertentu untuk setiap tingkat pengukuran. Tabel 8.6 Tingkat Pengukuran Evaluasi dan Tindakan Tepat Jenis Data: Tingkat Pengukuran Mendefinisikan Karakteristik Ukur Deskriptif Kategoris: Nominal Categories: Label tidak memiliki arti numerik Frekuensi jumlah dan persentase: modus Kategoris: Nomor urut / kategori menyiratkan urutan peringkat intensuty, bukan kuantitas numerik Frekuensi jumlah dan persentase, mean dan standar deviasi. Numerik: Interval Jarak antara angka sama (unit standar untuk mengukur) Frekuensi jumlah dan persentase, mean dan standar deviasi. Numerik: Jarak Rasio antara jumlah yang sama (unit standar mrasure) dan ada titik nol mutlak Frekuensi jumlah dan persentase, mean dan standar deviasi. Nominal, atau nama, data yang sering digunakan untuk mengkategorikan orang dalam helath evaluationns promosi, Contoh kategori seperti seorang perokok saat ini / pernah perokok / ex-perokok, peserta / non partisipan, kelompok anggota / kontrol anggota kelompok eksperimen, atau keanggotaan kelompok etnis. Kategori ini tidak dapat dipesan. Dengan demikian, langkah-langkah frekuensi, seperti jumlah dan persentase, yang digunakan untuk menggambarkan atau meringkas data. Ordinal kategori tempat data dalam urutan, tetapi tidak ada unit standar untuk mengukur mendasari pesanan. Contoh dari promosi kesehatan termasuk ringan, sedang dan berat merokok miskin, adil, baik, dan kesehatan yang sangat baik. Dalam interval skala jarak antara nomor yang sama tapi tiga tidak nol, Beberapa skala sikap yang dibangun untuk memiliki interval yang sama, nd skala mengukur tingkat agreemnet dengan pernyataan keyakinan yang assumend untuk berperilaku timbangan sebagai iterval. Sistolik dan diastolik membaca preasure darah juga contoh skala interval. Skala rasio memiliki jarak yang sama antara angka dan titik nol, skala ini umum dalam jumlah perilaku seperti Banyaknya bulan perawatan prenatal yang diterima, jumlah rokok yang dihisap, jumlah pound hilang, dan ons alkohol yang dikonsumsi, atau fisiologis langkah-langkah seperti serum cotenine. Statistik deskriptif dan inferensial Statistik dalam evaluasi beberapa tujuan yang parah. Yang pertama adalah untuk meringkas dan menjelaskan data. Statistik melayani puspose ini caleed statistik deskriptif. Frekuensi jumlah total adalah dalam kategori dan sesuai untuk semua tingkat pengukuran. Sebagai contoh, jumlah peserta pada lokakarya atau jumlah subyek dengan kolesterol serum ove 200 mg / dl adalah jumlah frekuensi. Mean, median, dan mode, tiga jenis rata-rata, adalah ukuran tendensi sentral. Masing-masing adalah nomor tunggal yang mewakili tendensi sentral dari set data. Mean adalah rata-rata aritmatika dari serangkaian pengamatan. Median didefinisikan sebagai pengamatan tengah kelompok, dengan setengah dari pengamatan yang terjadi di atas setengah bawahnya. Median harus digunakan bila ada data yang terpencil, karena berbeda dengan mean, itu tidak terpengaruh oleh nilai ekstrim. Modus adalah observasi paling sering yang terjadi. Ini adalah satu-satunya langkah yang tepat untuk data kategorikal. Sebagai contoh, mode dapat digunakan untuk menunjukkan waktu puncak di sebuah pusat kebugaran. Mean dan median oleh diri mereka, namun tidak memberikan informasi lengkap tentang satu set data. Sebuah esures penyebaran atau variasi juga diperlukan. Rentang ini didefinisikan sebagai nilai tertinggi dikurangi nilai terendah dalam kumpulan data dan dengan demikian dipengaruhi oleh nilai ekstrim. Varians dan standar deviasi adalah ukuran didasarkan pada deviasi dari masing-masing ukuran dari nilai rata-rata. Tindakan hubungan menjelaskan apakah dua variabel yang berhubungan satu sama ther, yang merupakan salah satu bervariasi dengan yang lain bervariasi, korelasi adalah nilai antara +1 (korelasi positif) dan -1 (korelasi negatif). Skor 0 menunjukkan bahwa tidak ada hubungan antara variabel. Misalkan korelasi antara susceptability dirasakan untuk kanker payudara dan niat untuk mendapatkan mammogram ditemukan oleh evaluator menjadi 0,75 ini akan menunjukkan bahwa variabkes ini berhubungan secara positif, yaitu jika salah satu tinggi, yang lain mungkin akan terlalu (dan sebaliknya). Suatu korelasi negatif jika skor tinggi pada satu variabel dikaitkan dengan skor rendah pada yang lain dan sebaliknya. Statistik inferensial menjawab pertanyaan apakah perbedaan yang diamati antara dua variabel bisa terjadi secara kebetulan saja, statistik Ainferential memanfaatkan distribusi probabilitas untuk menguji hipotesis nol bahwa tidak ada perbedaan yang diamati antara dua variabel. Hal ini memungkinkan evaluator untuk menjawab dengan tingkat tertentu certanty apakah variabkes, seperti pretest dan posttest scres knowedge atau tingkat berhenti merokok dari dua program yang berbeda berhenti, berbeda secara signifikan. Dengan demikian, evaluator dapat menjawab pertanyaan suc sebagai "Apakah program ini bekerja?" Atau "Apakah salah satu program yang lebih efektif daripada yang lain?". Exmple uji statistik inferensial adalah t-test, chi square, dan analisis varians, Perlu menunjukkan bahwa signifikansi statistik tidak sama dengan signifikansi praktis. Perbedaan kecil sering signifikan secara statistik ketika ada sejumlah besar mata pelajaran. Namun perbedaan ini dapat membuat perbedaan praktis untuk pengetahuan oarticipants, perilaku, atau status kesehatan. Dengan demikian evaluator harus selalu menggunakan akal sehat dalam menerapkan temuan evaluasi terhadap keputusan-keputusan tentang program. Bagian ini pada analisis data dan statistik telah memberikan gambaran singkat mengenai subjek. Kami menyarankan bahwa semua siswa pendidikan kesehatan mengambil kelas statistik pengantar dan tahu bagaimana menghitung dan menginterpretasikan statistik yang sering digunakan. Setiap buku statstic pengantar untuk ilmu-ilmu sosial akan memberikan informasi mengacu pada konsep yang diperkenalkan dalam bab ini. Analisis ekonomi Analisis biaya menyediakan data penting untuk digunakan dalam memutuskan apakah akan memulai atau mempertahankan program pendidikan helath. Ada dua jenis utama dari analisis biaya, analisis biaya manfaat dan analisis efektivitas biaya. Analisis biaya manfaat menjawab pertanyaan, "Apa keuntungan finansial saya menerima untuk uang yang dihabiskan untuk program ini?" Analisis efektivitas biaya menjawab pertanyaan, "Dari semua pilihan program yang saya miliki, mana yang akan memberikan return yang paling efisien pada dolar saya diinvestasikan? ". Hijau dan Lewis (1986) mendefinisikan konsep-konsep ini sebagai berikut:Biaya manfaat: Ukuran dari biaya intervensi relatif o manfaat yang menghasilkan, usulaly dinyatakan sebagai rasio dolar disimpan atau diperoleh untuk setiap dolar yang dihabiskan untuk program ini. Efektivitas biaya: Sebuah Ukur biaya intervensi relatif terhadap dampaknya, biasanya dinyatakan dalam dolar per unit efek. Untuk kedua biaya manfaat dan analisis efektivitas biaya, langkah pertama adalah untuk membuat akuntansi yang cermat dari biaya program. Ini meliputi biaya untuk melakukan program tersebut, termasuk personil, perlengkapan dan bahan-bahan, dan ruang, dan biaya kepada peserta atau compay, seperti waktu kerja yang hilang untuk partisipasi program dan transportasi waktu dan biaya. Biaya evaluasi seharusnya tidak dimasukkan dalam biaya program, kecuali mereka adalah bagian dari pemeliharaan program. Spesifikasi yang jelas dari tujuan proses dan definisi sumber daya yang dibutuhkan untuk pelaksanaan program sangat penting untuk perhitungan biaya dolar dari program promosi kesehatan. Kolom pertama dari tabel 8.7 meringkas kategori biaya program yang harus dipertimbangkan. Dalam analisis biaya manfaat, manfaat juga dihitung dan dinyatakan dalam dolar. Langkah pertama adalah daftar manfaat dari program ini, dimulai dengan manfaat ditemukan melalui hasil evauation. Manfaat dari program promosi kesehatan termasuk mengurangi morbiditas, mengurangi angka kematian, dan peningkatan kualitas hidup. Kolom kedua tabel 8.7 berisi dikategorikan manfaat Program kesehatan yang ada terdaftar oleh Warner dan Luce (1982). Bagaimana seseorang menentukan biaya yang terkait dengan hasil tersebut? Untuk morbiditas berkurang, biaya yang berkaitan dengan penurunan absensi, mengurangi rawat inap, dan mengurangi kunjungan ke dokter dapat diukur. Untuk penurunan mortalitas, mengurangi mempekerjakan kembali dan pelatihan kembali costc, dan gaji dan produktivitas di masa depan dapat dimasukkan. Meskipun relatif mudah untuk menghitung beberapa manfaat dalam jangka dolar, sangat sulit untuk menempatkan dolar valueon lain. Sebagai contoh, apa nilai dolar dari kehidupan manusia? Apakah nilai dolar dari kehidupan manusia? Apakah diukur sebagai nilai lifeinsurance seseorang atau penghargaan pengadilan untuk kehilangan nyawa produktif? Apakah kehidupan ibu rumah tangga, yang produktivitasnya tidak diukur dengan gaji, bernilai kurang dari orang-orang dari karyawan perusahaan? Terbaru analysses biaya manfaat pencegahan dan promosi helath telah mencatat bahwa rasio biaya manfaat tidak mendukung program kesehatan preventif. Meningkatkan exoectancy hidup membawa serta cists tambahan sebagai wekk ass benefitsl Semakin lama kehidupan orang, biaya yang lebih medis akan terjadi dan semakin banyak uang yang akan pemberi kerja harus membayar dana pensiun Dalam analisis biaya manfaat, nilai dolar dari biaya dan manfaat dihitung. Dalam rangka untuk membandingkan biaya dan manfaat yang terjadi pada berbagai titik dalam waktu, diskon digunakan untuk menyesuaikan fakta bahwa dolar saat ini bernilai lebih dari satu dolar di masa depan. Manfaat tersebut kemudian dibagi dengan biaya untuk membuat rasio manfaat biaya. Jika rasionya adalah 1:1, program impas. Jika rasio lebih besar dari 1:1, manfaat dari program tersebut melebihi biaya. Sebuah rasio 03:01 akan menunjukkan bahwa setiap 1 $ dihabiskan untuk program ini, 3 $ yang diterima dalam manfaat. Jika rasio kurang dari 1:1, program ini biaya lebih dari itu diperoleh. Karena masalah yang terkait dengan menghitung nilai dolar manfaat dan karena program pencegahan menyebabkan peningkatan biaya dari pensiun dan pemanfaatan pelayanan kesehatan yang berhubungan dengan kehidupan yang lebih panjang, kebanyakan evaluator merekomendasikan bahwa analisis efektivitas biaya adalah lebih baik untuk analisis biaya manfaat dalam pengambilan keputusan tentang program untuk melakukan. Dalam analisis effectivenes biaya, benfits tidak perlu dihitung dalam jumlah dolar. Manfaat mungkin jangka panjang, seperti tahun-tahun kehidupan diselamatkan, jangka pendek, seperti jumlah perokok yang berhenti atau jumlah pon hilang. Hal ini memungkinkan anajer promosi heakth untuk memilih program yang paling efisien untuk memenuhi tujuan yang sama. Informasi harus dikumpulkan untuk menunjukkan berapa banyak biaya Program A untuk menghasilkan hasil yang diberikan dibandingkan dengan biaya program B untuk menghasilkan hasil tersebut. Brownell dan rekan (1984) dibandingkan lima program penurunan berat badan differet. Mereka menemukan biaya per 1 persen pengurangan persentase kelebihan berat badan menjadi $ 44,60 untuk sebuah klinik universitas, $ 25,14 untuk pemimpin profesional dalam pengaturan tempat kerja, $ 8,28 untuk pemimpin awam dalam pengaturan tempat kerja, $ 3,00 untuk program komersial, dan $ 2,93 untuk kompetisi tempat kerja. Dari ketiga program tempat kerja, persaingan jelas lebih hemat biaya.

Cara Mengatur Proses Evaluasi Setiap program pendidikan kesehatan memiliki sejumlah konstituen dan, seperti halnya dengan perencanaan program, penting untuk menyertakan pihak yang terlibat berbeda, juga disebut stakeholder, dalam diskusi tentang tujuan dan proses evaluasi. Dengan cara itu, evaluasi akan membahas thedifferent kepentingan stakeholders, dan hasil evaluasi tersebut akan digunakan. Sumber keterbatasan dan kendala lainnya harus ditangani dan sope evaluasi (proses, dampak, hasil, efektivitas biaya) ditentukan. Tujuan program harus diidentifikasi, dan rencana ditata untuk mengukur apakah atau tidak mereka bertemu. Pada saat ini keputusan dibuat mengenai data yang akan dikumpulkan, dan desain penelitian yang dipilih. Sebuah sistem manajemen untuk mengumpulkan, memasukkan, membersihkan, menyimpan, dan menganalisis data sudah diatur. Proses data dianalisis secara berkala untuk memberikan informasi tentang seberapa baik program ini dilaksanakan untuk umpan balik ke program. Dampak dan outcone data dianalisis setelah selesai program. Menyampaikan hasil evaluasi kepada pemangku kepentingan membutuhkan laporan tailores dengan kebutuhan khusus mereka. Sebagai contoh, manajer aprogram akan ingin laporan rinci langkah-langkah evaluasi proses keputusan yang harus dibuat sebagai program sedang dilakukan, manajer tingkat tinggi organisasi akan tertarik pada berapa banyak orang yang hadir, seberapa puas mereka, apakah program bekerja , dan bagaimana biaya yang efektif itu. Peserta program akan memiliki perspektif mereka sendiri. Format, isi tertutup, dan tingkat analyticsophistication akan berbeda bagi para pemangku kepentingan yang berbeda. Memorandum, laporan manajemen, artikel buletin, artikel jurnal profesional, dan laporan tahunan dapat digunakan untuk pelaporan ke constituencues berbeda. Adalah penting bahwa laporan tepat waktu, dipahami dengan jelas, dan disebarluaskan kepada semua khalayak yang tepat. Hal ini akan meningkatkan utilitas dari hasil evaluasi untuk membuat keputusan tentang program ini. ringkasan Evaluasi digunakan untuk menilai apakah prorams pendidikan kesehatan sedang dilaksanakan sesuai dengan rencana, apakah tujuan untuk perubahan yang ditetapkan selama proses perencanaan terpenuhi, dan apakah programitself bertanggung jawab untuk perubahan. Pendidik kesehatan yang paling mungkin untuk menggunakan desain nonexperimental ketika menilai apakah program memenuhi tujuannya dan desain eksperimental semu ketika mengevaluasi efektivitas program. Perhatian khusus harus diberikan untuk menjamin reliabilitas dan validitas dari langkah-langkah yang digunakan dalam pengumpulan data. Ada empat tingkat pengukuran nominal, ordinal, interval, dan rasio dan penting bahwa statistik terpilih analisis fr sesuai dengan tingkat skala. Statistik deskriptif meringkas data, statistik inferensial menguji apakah perbedaan antara dua variabel bisa terjadi secara kebetulan. Analisis ekonomi sering digunakan untuk memutuskan apakah akan memulai atau mempertahankan program tertentu, dan analisis efektivitas biaya yang direkomendasikan atas analisis biaya manfaat. Proses identifikasi pemangku kepentingan, ruang lingkup evaluasi, tujuan, dan manajemen dan impelentation evaluasi dibahas. Aku pengaturan apapun, adalah penting bahwa evaluasi memenuhi kebutuhan personil yang membuat keputusan mengenai program promosi kesehatan dan disajikan kepada mereka dalam bentuk yang berguna.