Experience Sharing: Strategi Prodi menuju dan mendapatkan...

Experience Sharing:

Strategi Prodi menuju dan mendapatkan Akreditasi ABET

Anggoro Cahyo SukartikoDepartment of Agro-Industrial Technology, Faculty of Agricultural Technology

Universitas Gadjah Mada

Presented on Workshop Akreditasi Internasional Program Studi PIU Universitas Jember | 9 Desember 2019

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan

Bagian III – Persiapan dan submission

Bagian IV – Persiapan visitasi

Bagian V – Pasca visitasi

Outline

Bagian I – Mengenal ABET Istilah yang digunakan

Komisi-komisi ABET

Waktu-waktu kritis

Bagian II – Membuat keputusan

Bagian III – Persiapan dan submission

Bagian IV – Persiapan visitasi

Bagian V – Pasca visitasi

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan Memilih komisi akreditasi yang sesuai

Menentukan periode akreditasi

Retroactive atau tidak?

Menentukan rentang waktu data yang digunakan

Bagian III – Persiapan dan submission

Bagian IV – Persiapan visitasi

Bagian V – Pasca visitasi

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan

Bagian III – Persiapan dan submission Sosialisasi ABET dan pembentukan tim penyusun SSR

Pengumpulan dan penyiapan data dan dokumen pendukung

Penyusunan SSR

Review and improvement – readiness, submission

Bagian IV – Persiapan visitasi

Bagian V – Pasca visitasi

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan

Bagian III – Persiapan dan submission

Bagian IV – Persiapan visitasi Persiapan visitasi tingkat universitas, fakultas, dan progam studi

Koordinasi dengan konstituen program studi

Komunikasi dengan pihak ABET (team chair)

Bagian V – Pasca visitasi

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan

Bagian III – Persiapan dan submission

Bagian IV – Persiapan visitasi

Bagian V – Pasca visitasi Komunikasi dengan team chair dan program evaluator (PEv) dan tindak lanjut

Bagian 1 – Mengenal ABET

Speak the same language..

In 1997, following nearly a decade of development, we adopted

Engineering Criteria 2000 (EC2000), considered at the time a

revolutionary approach to accreditation criteria. EC2000 focused on

learning outcomes (what students learn) rather than what

is taught. By implementing such fundamental changes, ABET moved

away from a rigid process orientation toward a set of attributes

professionals must possess to excel in fields of critical importance to society.

Outcomes-Based Accreditation

Originally founded in 1932 as the Engineers’ Council for Professional

Development (ECPD), in 1980, we became the Accreditation Board

for Engineering and Technology to more accurately describe the

emphasis on accreditation. In 2005, to reflect our expanded scope, we began using the acronym ABET only.

ABET

TodayWe currently accredit 4,144 programs at 812 colleges and

universities in 32 countries. Each year, 2,200 experts from 35

member societies contribute to ABET’s goal of assuring confidence in science, technology, engineering and mathematics (STEM) education.

Istilah umum di ABET

Accreditation criteria

General criteria

Program Educational Objectives (PEOs)

Student Outcomes (SOs)

Performance Indicators (PIs)

Accreditation Policy and Procedure Manual (APPM)

Assessment

Evaluation

See more detail at https://www.abet.org/program-evaluators/training/glossary/

Istilah umum di ABET

Accreditation criteria - butir-butir yang pemenuhannya menunjukkan bahwa suatu Prodi telah direncanakan, dioperasikan & dikelola sesuai dengan standard yang ditentukan lembaga penilai General criteria – berlaku untuk semua program, mis: teknik (EAC) atau

teknologi (ETAC)

Program criteria – berlaku untuk setiap prodi berdasarkan nomenklatur disiplin ilmu masing-masing

Self-Study Report (SSR)

Program Educational Objectives (PEOs)

Student Outcomes (SOs)

Performance Indicators (PIs)

Accreditation Policy and Procedure Manual (APPM)

Assessment

Evaluation See more detail at https://www.abet.org/program-evaluators/training/glossary/

Istilah umum di ABET

Accreditation criteria - butir-butir yang pemenuhannya menunjukkan bahwa suatu Prodi telah direncanakan, dioperasikan & dikelola sesuai dengan standard yang ditentukan lembaga penilai General criteria – berlaku untuk semua program, mis: teknik (EAC) atau

teknologi (ETAC)

Program criteria – berlaku untuk setiap prodi berdasarkan nomenklatur disiplin ilmu masing-masing

Self-Study Report (SSR)

Program Educational Objectives (PEOs)

Student Outcomes (SOs)

Performance Indicators (PIs)

Accreditation Policy and Procedure Manual (APPM)

Assessment

Evaluation See more detail at https://www.abet.org/program-evaluators/training/glossary/

Istilah umum di ABET

Accreditation criteria

Self-Study Report (SSR) - a quantitative and qualitative assessment of your program’s strengths and limitations. It provides a comprehensive overview of your program and guides our review team throughout its evaluation.

Program Educational Objectives (PEOs)

Student Outcomes (SOs)

Performance Indicators (PIs)

Accreditation Policy and Procedure Manual (APPM)

Assessment

Evaluation

See more detail at https://www.abet.org/program-evaluators/training/glossary/

General &

Program Criteria

General &

Program Criteria

Istilah umum di ABET

Accreditation criteria

General criteria

Program Educational Objectives (PEOs) - broad statements that describe what graduates are expected to attain within a few years after graduation. Program educational objectives are based on the needs of the program’s constituencies.

Student Outcomes (SOs)

Performance Indicators (PIs)

Accreditation Policy and Procedure Manual (APPM)

Assessment

Evaluation

See more detail at https://www.abet.org/program-evaluators/training/glossary/

Istilah umum di ABET

Accreditation criteria

General criteria

Program Educational Objectives (PEOs)

Student Outcomes (SOs) - describe what students are expected to know and be able to do by the time of graduation. These relate to the knowledge, skills, and behaviors that students acquire as they progress through the program.

Performance Indicators (PIs) – indikator yang digunakan untuk mengukur capaian student outcomes

Accreditation Policy and Procedure Manual (APPM)

Assessment

Evaluation

See more detail at https://www.abet.org/program-evaluators/training/glossary/

Istilah umum di ABET

Accreditation criteria

General criteria

Program Educational Objectives (PEOs)

Student Outcomes (SOs)

Performance Indicators (PIs)

Accreditation Policy and Procedure Manual (APPM) - Jalannya proses evaluasi & akreditasi oleh ABET diatur oleh dokumen

Assessment

Evaluation

See more detail at https://www.abet.org/program-evaluators/training/glossary/

PENTING:Baik Accreditation Criteria maupun APPM merupakan dokumen yang diperbarui tiap siklus akreditasi, & wajib dibaca oleh Prodi yang mempersiapkan diri untuk evaluasi

Istilah umum di ABET

Accreditation criteria

General criteria

Program Educational Objectives (PEOs)

Student Outcomes (SOs)

Performance Indicators (PIs)

Accreditation Policy and Procedure Manual (APPM)

Assessment - one or more processes that identify, collect, and prepare data to evaluate the attainment of student outcomes. Effective assessment uses relevant direct, indirect, quantitative and qualitative measures as appropriate to the outcome being measured. Appropriate sampling methods may be used as part of an assessment process.

Evaluation

See more detail at https://www.abet.org/program-evaluators/training/glossary/

Istilah umum di ABET

Accreditation criteria

General criteria

Program Educational Objectives (PEOs)

Student Outcomes (SOs)

Performance Indicators (PIs)

Accreditation Policy and Procedure Manual (APPM)

Assessment

Evaluation - one or more processes for interpreting the data and evidence accumulated through assessment processes. Evaluation determines the extent to which student outcomes are being attained. Evaluation results in decisions and actions regarding program improvement.

See more detail at https://www.abet.org/program-evaluators/training/glossary/

Komisi-komisi ABET

Waktu-Waktu Kritis: 18 Month Accreditation Process

https://www.abet.org/accreditation/get-accredited/accreditation-step-by-step/

Waktu-Waktu Kritis: 18 Month Accreditation Process

https://www.abet.org/accreditation/get-accredited/accreditation-step-by-step/

Waktu-Waktu Kritis: 18 Month Accreditation Process

https://www.abet.org/accreditation/get-accredited/accreditation-step-by-step/

Fees for Program Outside the U.S.

Bagian 2 – Membuat keputusan

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan Memilih komisi akreditasi yang sesuai

Menentukan periode akreditasi

Retroactive atau tidak?

Menentukan rentang waktu data yang digunakan

Bagian III – Persiapan dan submission

Bagian IV – Persiapan visitasi

Bagian V – Pasca visitasi

Memilih komisi yang sesuai

Memilih komisi yang sesuai

Menentukan periode akreditasi

• Lihat kembali waktu-waktu penting pada Bagian I sebagai pertimbangan pemilihan periode akreditasi

• Apakah pada institusi sudah ada prodi yang terakreditasi pada komisi yang sama?

• Ya – kapan akreditasi program tersebut berakhir?

• Tidak

Menentukan periode akreditasi

• Lihat kembali waktu-waktu penting pada Bagian I sebagai pertimbangan pemilihan periode akreditasi

• Apakah pada institusi sudah ada prodi yang terakreditasi pada komisi yang sama?

• Ya – kapan akreditasi program tersebut berakhir?

• Tidak

Menentukan periode akreditasi

• Lihat kembali waktu-waktu penting pada Bagian I sebagai pertimbangan pemilihan periode akreditasi

• Apakah pada institusi sudah ada prodi yang terakreditasi pada komisi yang sama?

• Ya – kapan akreditasi program tersebut berakhir?

• Tidak

Retroactive atau tidak?

• Lihat kembali waktu-waktu penting pada Bagian I sebagai pertimbangan pemilihan periode akreditasi

• Apakah pada institusi sudah ada prodi yang terakreditasi pada komisi yang sama?

• Ya – kapan akreditasi program tersebut berakhir?

• Tidak

Menentukan periode pengumpulan data

• Bergantung pada periode akreditasi yang diusulkan

• Bergantung pada pilihan retroactive atau tidak

• Perubahan mayor yang dilaksanakan prodi, misal kurikulum baru

Bagian 3 – Persiapan dan submission

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan

Bagian III – Persiapan dan submission Sosialisasi dan pembentukan tim

Pengumpulan dan penyiapan data dan dokumen pendukung

Penyusunan SSR

Review and improvement – readiness, submission

Bagian IV – Persiapan visitasi

Bagian V – Pasca visitasi

Sosialisasi dan pembentukan tim

• Sosialisasi pada konstituen internal• Dosen

• Tendik

• Mahasiswa

• Pembentukan tim • Pengumpulan data

• Penyusunan Self-Study Report

• Fasilitas dan sumberdaya pendukung

Pengumpulan dan penyiapan data pendukung

• What, When, from Whom, Interpretation

• Mengidentifikasi jenis data yang dibutuhkan • Mahasiswa dan lulusan• Dosen dan Tenaga Kependidikan• Fasilitas (perpustakaan, peralatan uji, kelas, keluasan akses dan kecepatan

internet, dsb.)• Hasil asesmen capaian pembelajaran, dsb.

• Mengidentifikasi periode data yang dibutuhkan (TS, TS-1, TS-2, dst.)

• Mengidentifikasi dokumen pendukung • Course syllabi, Faculty vitae, Equipment, Institutional summary, Spesifikasi

program studi, Rencana Pembelajaran Semester, notula-notula terkait, transkrip, dsb.

• Translasi dalam bahasa Inggris

Penyusunan Self-Study Report

• Background information

• General criteria• Students

• Program Educational Objectives

• Student Outcomes

• Continues Improvement

• Curriculum

• Faculty

• Facilities

• Institutional Support

• Program Criteria

Conceptual model for Program

Continuous Improvement

Criterion 1 - Students

• Perlu adanya kebijakan resmi untuk penerimaan mhs baru maupun pindahan, serta mekanisme pengakuan kesetaraan masa studi / kerja di luar Prodi

• Prodi memiliki mekanisme pengecekan & dokumentasi untuk memastikan bahwa semua lulusan telah memenuhi seluruh persyaratan akademik (misalnya prosedur degree audit)

Criterion 1 - Students

Criterion 2 - Program Educational Objectives

Criterion 2 - Program Educational Objectives

PEO

Pemangku Kepentingan

Kriteria Akreditasi

Visi-Misi Institusi

Relevansi PEO dijaga dengan proses kaji-ulang periodik yang:• terdokumentasikan• efektif• dimanfaatkan secara

sistematik

Criterion 2 - Program Educational Objectives

PEO

Pemangku Kepentingan

Kriteria Akreditasi

Visi-Misi Institusi

Relevansi PEO dijaga dengan proses kaji-ulang periodik yang:• terdokumentasikan• efektif• dimanfaatkan secara

sistematik

Criterion 3 - Student Outcomes

SO ABET EAC SO ABET ETAC

Criterion 3 - Student Outcomes

Prodi Anda dapat:

Adopt

Adapt

Add

Criterion 4 - Continuous Improvement

Criterion 4 - Continuous Improvement

Criterion 4 - Continuous Improvement

Criterion 4 -Continuous

Improvement

Criterion 4 -Continuous

Improvement

Criterion 4 - Continuous Improvement

Criterion 4 - Continuous Improvement

Criterion 5 - Curriculum

Criterion 5 - Curriculum

Criterion 6 - Faculty

Criterion 6 - Faculty

Criterion 7 - Facilities

Criterion 8 – Institutional Support

Review and improvement – readines, submission

• Internal review and improvement

• Readiness review and submission

• Lihat kembali waktu-waktu kritis pada bagian I

Bagian 4 – Persiapan visitasi

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan

Bagian III – Persiapan dan submission

Bagian IV – Persiapan visitasi Persiapan visitasi tingkat universitas, fakultas, dan progam studi

Koordinasi dengan konstituen program studi

Komunikasi dengan pihak ABET (team chair)

Bagian V – Pasca visitasi

Persiapan visitasi tingkat Universitas, Fakultas, & Prodi

Koordinasi dengan pimpinan universitas dan fakultas

Kunjungan ke fasilitas universitas, fakultas, dan prodi

Ruangan, kelas, kendaraan

Penataan dokumen

Koordinasi dengan konstituen eksternal

Alumni

Pengguna lulusan

Industrial Advisory Board

Face to face atau video call?

Komunikasi dengan pihak ABET

Jadwal visitasi Biasanya Minggu – Selasa

Fasilitas yang diminta selama on-site visit Ruangan

Kendaraan

Penginapan

Translator, observer Persyaratan

Wawancara dengan external constituents Face to face

Online

Bagian 5 – Pasca visitasi

Outline

Bagian I – Mengenal ABET

Bagian II – Membuat keputusan

Bagian III – Persiapan dan submission

Bagian IV – Persiapan visitasi

Bagian V – Pasca visitasi Komunikasi dengan team chair dan program evaluator (PEv) dan tindak lanjut

Terms

• Strength - Exceptionally strong, effective practice or condition. A statement that describes what was observed, what makes it stand above the norm, and how it impacts the program positively.

• Observation - A comment or suggestion that does not relate directly to the accreditation action but is offered to assist the institution in its continuing efforts to improve its programs.

• Concern - A statement that a program currently satisfies a criterion, policy, or procedure, but the potential exists for the situation to change such that the criterion, policy, or procedure may not be satisfied.

• Weakness - A statement that a program lacks the strength of compliance with a criterion, policy, or procedure to ensure that the quality of the program will not be compromised. Remedial action is required to strengthen compliance with the criterion, policy, or procedure prior to the next review.

• Deficiency - A statement that a criterion, policy, or procedure is not satisfied. The program is not in compliance with the criterion, policy, or procedure.

Komunikasi dan Tindak Lanjut

Komunikasi dan Tindak Lanjut (2)

Komunikasi dan Tindak Lanjut (3)

Rujukan

Materi yang diberikan dirangkum dari berbagai sumber:

• https://abet.org

• ABET Institute for the Development of Excellence in Assessment Leadership (IDEAL)

• ABET Accreditation Policy and Procedure Material (APPM) 2019-2020 Accreditation Cycle

Terima kasih..

PROGRAM AssessmenT

performance indicators

TREND LINE

what to avoid in writing performance indicators

WHAT IS A RUBRIC ?

CONCEPT A RUBRIC

EXAMPLE A RUBRIC

Compile the map

ASSESSMENT METHOD

best practice

TREND LINE