Office for Students telah menerbitkan pendekatan penilaian yang diusulkan untuk sistem kualitas dan rating yang direvisi, dengan menjelaskan bagaimana penilai akan menilai bukti tentang pengalaman mahasiswa, hasil mahasiswa, dan konsistensi antarkelompok, mata pelajaran, serta jenis penyelenggaraan. Konsultasi yang dipublikasikan pada 22 Oktober 2026 ini ditujukan untuk membuat rating lebih berbasis bukti, transparan, dan konsisten, sambil tetap mengandalkan penilaian ahli.
Fakta utama
- Penilai akan menilai pengalaman mahasiswa berdasarkan pengajuan penyelenggara, indikator NSS yang diperluas, dan bukti tambahan dari mahasiswa.
- Hasil mahasiswa akan dinilai menggunakan indikator retensi dan penyelesaian, ditambah indikator pascastudi yang diperluas serta bukti kontekstual.
- Pendekatan ini akan memasukkan kesetaraan kesempatan dengan memeriksa apakah kualitas dan hasil konsisten di berbagai kelompok mahasiswa.
- Sebagai aturan praktis, OfS menyebut setidaknya 80% mahasiswa yang mengalami tingkat kualitas serupa akan dianggap secara luas konsisten.
- Untuk penyelenggara yang tidak mengajukan rating TEF, penilai akan menentukan apakah bukti mendukung hasil Memuaskan atau Tidak Memuaskan untuk tiap aspek.
Apa artinya bagi mahasiswa dan penyelenggara?
Proposal ini penting karena mengubah cara OfS memutuskan apakah sebuah penyelenggara memenuhi persyaratan kualitas minimum dan, bagi pemohon TEF, bagaimana rating akan ditetapkan. Mahasiswa dan staf harus mengantisipasi bahwa penilai tidak hanya melihat indikator numerik, tetapi juga pengajuan, bukti kontekstual, dan tanda-tanda bahwa kualitas tidak merata antarmata kuliah, mode studi, atau kelompok mahasiswa.
Untuk pengalaman mahasiswa, OfS menyatakan penilai biasanya akan memberi bobot setengah pada indikator berbasis NSS dan setengah pada bukti kualitas lain dalam pengajuan. Untuk hasil mahasiswa, pandangan awal akan datang dari ukuran retensi, penyelesaian, dan pascastudi sebelum bukti kontekstual dipertimbangkan. Artinya, penyelenggara mungkin perlu menunjukkan bukan hanya hasil utama yang kuat, tetapi juga bukti bahwa kualitas terjaga di seluruh penyelenggaraan mereka.
Proposal ini juga mengarah pada ambang praktis: jika sekitar 20% mahasiswa mengalami kualitas lebih rendah atau hasil yang lebih buruk dan hal itu tidak dibenarkan atau ditangani dengan memadai, hal tersebut kemungkinan akan membatasi penilaian. Dengan kata lain, penyelenggara bisa terdorong mengidentifikasi titik lemah dalam penyelenggaraan lebih awal dan merespons sebelum rating terdampak.
Bagi penyelenggara yang menjalani penilaian lanjutan, OfS menyatakan kunjungan dan pengumpulan bukti tambahan akan memiliki bobot signifikan ketika risiko telah diidentifikasi.
Bagaimana OfS akan menimbang bukti?
Berdasarkan proposal ini, penilai akan mencapai dan mencatat penilaian untuk setiap kriteria sebelum menggabungkannya menjadi hasil aspek atau rating keseluruhan. Untuk pengalaman mahasiswa, kriteria akan dinilai berdasarkan bukti dari indikator, pengajuan, bukti penilaian lanjutan jika relevan, dan bukti lain yang tersedia bagi regulator.
OfS menyatakan penilai biasanya akan memberi bobot lebih kecil pada penyelenggara yang menjelaskan inisiatif tanpa bukti dampaknya, atau pada pandangan mahasiswa yang tidak menunjukkan bahwa pendapat tersebut dikumpulkan dari beragam mahasiswa. Jika bukti saling bertentangan, penilai akan menggunakan penilaian ahli dan memberi bobot lebih besar pada bukti yang lebih kuat, representatif, atau paling langsung relevan.
Untuk hasil mahasiswa, penilai terlebih dahulu membentuk pandangan awal dari indikator lalu mempertimbangkan informasi kontekstual. OfS menyatakan pihaknya dapat meminta informasi atau klarifikasi tambahan, termasuk tentang apakah mata kuliah tertentu harus dikeluarkan dari data, dan dapat meminta spesialis data OfS untuk memverifikasi efek tersebut.
Mengapa konsistensi antarkelompok sangat penting?
Karena OfS ingin rating yang lebih tinggi menandakan kualitas di seluruh penyelenggaraan, bukan hanya di bagian yang paling kuat. Panduan draf menyebut rating Silver atau Gold seharusnya menunjukkan bahwa mahasiswa dapat secara wajar mengharapkan kualitas tinggi atau luar biasa di seluruh penyelenggaraan, sementara kelemahan signifikan pada mata pelajaran, mode studi, atau kelompok mahasiswa tertentu akan membatasi rating keseluruhan.
Proposal ini juga meminta penilai melihat apakah kualitas dan hasil konsisten antarkelompok mahasiswa, mata pelajaran, dan area penyelenggaraan saat memberikan rating. Regulator menyatakan tujuannya adalah memungkinkan variasi tertentu, tetapi tidak sampai menutupi kinerja yang jauh lebih lemah dan berdampak pada sebagian signifikan mahasiswa.
Untuk pengalaman mahasiswa, enam kriteria yang terkait dengan kondisi B1, B2, dan B4 mencakup apakah mata kuliah mutakhir, koheren, dan disampaikan secara efektif; apakah mahasiswa memiliki sumber daya, dukungan, dan keterlibatan; serta apakah penilaian dan regulasi akademik kredibel dan andal.
Apa yang dianggap memuaskan?
Bagi penyelenggara yang tidak mengajukan rating TEF, OfS akan memutuskan apakah bukti memberi keyakinan yang cukup bahwa kondisi kualitas yang relevan terpenuhi. Untuk pengalaman mahasiswa, itu berarti kondisi B1, B2, dan B4. Untuk hasil mahasiswa, itu berarti kondisi B3.
Jika kriteria dinilai memuaskan, hasil untuk aspek tersebut akan menjadi Memuaskan. Jika satu atau lebih kriteria dinilai tidak memuaskan, hasil untuk aspek itu akan menjadi Tidak Memuaskan. Untuk penilaian TEF, kriteria akan dinilai sebagai luar biasa, berkualitas tinggi, atau memuaskan sebelum rating aspek ditentukan.
Apa yang dikatakan proposal tentang hasil pascastudi?
OfS menyatakan penilai akan mempertimbangkan sejumlah ukuran hasil pascastudi dan biasanya akan memberi bobot lebih besar pada ukuran yang paling positif. Pendekatan ini akan mempertimbangkan hasil retensi, penyelesaian, dan pascastudi secara bersama-sama, beserta informasi kontekstual.
Regulator menyebut pendekatan ini dimaksudkan untuk mencerminkan keberhasilan selama studi dan hasil setelah studi, serta memungkinkan tren selama empat tahun data dipertimbangkan. Perbaikan berkelanjutan atau penurunan berkelanjutan dapat memengaruhi cara indikator ditafsirkan.
FAQ
Apa itu aturan praktis 80% dalam proposal ini?
OfS menyatakan 80% adalah ambang indikatif untuk apakah kualitas atau hasil dianggap secara luas konsisten. Jika setidaknya 20% mahasiswa mengalami kualitas yang lebih rendah atau hasil yang lebih buruk dan hal itu tidak dibenarkan dengan memadai, ini kemungkinan akan membatasi penilaian.
Apakah pendekatan yang sama berlaku untuk penyelenggara TEF dan non-TEF?
Ya, tetapi dalam bentuk yang berbeda. Pemohon TEF akan diberi rating, sedangkan penyelenggara yang tidak mengajukan TEF akan dinilai berdasarkan apakah bukti mendukung hasil Memuaskan atau Tidak Memuaskan untuk tiap aspek.
