Kisah Sukses/Texas Region 10 Mengubah Pendidikan dengan AI Kustomisasi
Texas Region 10 Mengubah Pendidikan dengan AI Kustomisasi
Ujian State of Texas Assessments of Academic Readiness K-12 yang berisiko tinggi di Wilayah 10 memerlukan perbaikan konten, tetapi hanya Prometric AI yang dapat dengan cepat menyimpan dan menyelaraskan 90.000 item dengan biaya yang efisien.
Latar Belakang
Pusat Layanan Pendidikan Wilayah 10 (ESC) di Texas memainkan peran penting dalam mendorong keberhasilan siswa dan membentuk lanskap pendidikan di seluruh negara bagian. Sebagai mitra untuk dua puluh ESC lainnya, Wilayah 10 melayani 120 distrik sekolah publik dan charter, lebih dari 3.000 sekolah, dan lebih dari 900.000 siswa di seluruh negara bagian Texas. ESC ini membuat, mendistribusikan, dan mendukung bank item, TEKSbank, yang digunakan oleh 600 distrik sekolah dan charter, lebih dari 5.000 sekolah, dan lebih dari 3 juta siswa. Dari pengembangan kurikulum dan dukungan pengajaran hingga pelatihan kepemimpinan dan layanan pendidikan khusus, Wilayah 10 berkomitmen untuk memberdayakan pendidik, memperkaya pengalaman belajar, dan mendorong hasil positif bagi siswa dari semua latar belakang dan kemampuan.
Tantangan
Wilayah 10 menerbitkan bank soal, TEKSbank, untuk distrik sekolah untuk membantu mempersiapkan siswa untuk ujian berisiko tinggi, Penilaian Kesiapan Akademik Negara Bagian Texas (STAAR®). 90.000 soal ujian TEKSbank disesuaikan dengan standar kurikulum negara bagian, Pengetahuan dan Keterampilan Esensial Texas, serta tag lainnya seperti Kedalaman Pengetahuan Webb (DOK) dan Taksonomi Bloom.
Seiring dengan perubahan tren pendidikan dan pembaruan standar negara, Wilayah 10 menginvestasikan banyak upaya untuk memastikan bank tersebut selaras dan relevan.
Untuk memastikan konten selaras dengan standar kurikulum negara bagian dan mengandung berbagai tingkat kesulitan, Wilayah 10 melakukan beberapa proyek penyelarasan setiap tahun. Kontraktor dipekerjakan untuk menganalisis setiap item secara manual. Beberapa proyek memerlukan seorang ahli kurikulum tunggal untuk masing-masing dari 12 tingkat kelas untuk meninjau sebanyak 2.000 item. Proses tinjauan ini tidak hanya memakan waktu, tetapi proses tinjauan manual juga menyebabkan kurangnya akurasi dan konsistensi di antara item yang diperbarui.
Wilayah 10 menghabiskan jumlah waktu dan sumber daya yang signifikan untuk mempertahankan keselarasan konten, dengan sedikit waktu untuk memprioritaskan pertumbuhan dan peningkatan konten. Tidak jarang menghabiskan $150.000 setiap tahun hanya untuk memperbarui standar atau tag pada konten yang ada. Ini menjadi semakin penting pada tahun 2023 ketika lanskap pendidikan Texas mengalami transformasi signifikan dengan diperkenalkannya item yang ditingkatkan teknologi (TEIs) dan penilaian online. Ini adalah pergeseran dari metode penilaian tradisional dan menantang pendidik untuk mempersiapkan siswa untuk paradigma baru yang menekankan berpikir kritis dan demonstrasi pengetahuan yang canggih. Untuk mendukung guru dan memimpin mereka ke batas baru ini, Wilayah 10 dihadapkan pada tantangan untuk menciptakan 20.000 TEIs berkualitas tinggi.
“Finetune memiliki pemahaman yang sangat baik tentang konten K-12 dan standar. Sangat mudah untuk berdiskusi dengan mereka tentang apa yang kami inginkan meskipun kami tidak memiliki pengetahuan teknis AI tentang cara mendeskripsikannya.”
Jim Newhouse
Mantan Asisten Direktur Solusi Data Wilayah 10
Strategi Kemitraan
Wilayah 10 awalnya menggariskan empat tujuan utama yang mereka coba capai dengan mencari mitra baru.
Memastikan kesesuaian dengan standar negara bagian terbaru
Mengidentifikasi kesenjangan pengetahuan
Menetapkan kedalaman pengetahuan (DOK) Memperbarui konten dengan relevansi budaya
“Kami menganggap AI sebagai alat yang diprogram oleh manusia, diawasi oleh manusia, dan dianalisis oleh manusia.”
- Jim Newhouse, Mantan Asisten Direktur Solusi Data Wilayah 10
ESC juga perlu mempertimbangkan beberapa faktor penting sebelum mereka memulai implementasi teknologi baru untuk menyederhanakan praktik:
Perlu mempertahankan pengawasan manusia sepanjang proses
Penyempurnaan dan penyesuaian konten yang konstan
Mengurangi waktu proyek keselarasan untuk memberikan lebih banyak waktu untuk meningkatkan dan mengembangkan lebih banyak pertanyaan
Wilayah 10 terhubung dengan tim Finetune Prometric pada Maret 2023. Finetune dengan cepat memahami tantangan ESC dan mulai bekerja untuk menerapkan Finetune Catalog™, sebuah alat hybrid AI-manusia untuk keselarasan konten dengan wawasan mendalam di seluruh bank item dan materi pembelajaran.
“Pelaksanaan Katalog hanya memerlukan beberapa minggu alih-alih enam bulan yang diproyeksikan dan mengurangi jumlah kontraktor yang dibutuhkan dari sepuluh menjadi hanya tiga. Menggunakan Finetune Catalog untuk menyelesaikan tugas penyelarasan telah menghemat waktu dan uang serta meningkatkan produktivitas secara keseluruhan.”
Jim Newhouse
Mantan Direktur Asisten Solusi Data Wilayah 10
Hasil
Region 10 menyediakan Finetune dengan materi pembelajaran seperti cetak biru ujian, standar, bank item, dan lainnya. Finetune mengambil konten ini dan membangun model Katalog AI yang disesuaikan yang akan bekerja untuk menganalisis konten mereka dan melihat seberapa baik itu selaras dengan Kedalaman Pengetahuan Webb. Setelah penyelarasan pertama, Katalog melaporkan tingkat akurasi 96%, membuat tim Region 10 bersemangat dan optimis untuk pengembangan dan perbaikan konten mereka di masa depan. "Jarum dalam tumpukan jerami" yang membutuhkan perbaikan penyelarasan dapat diperbaiki, dan mereka akan dapat melakukannya lebih cepat, lebih murah, dan lebih tepat daripada sebelumnya.
Bersama dengan akurasi penyelarasan pertama, ESC diberikan rasional yang akan berguna dalam pembangunan penilaian di masa depan. Rasional yang kompleks telah menjadi kumpulan data baru yang transformatif yang dapat mereka suplai kepada pembangun tes dan guru melalui platform penilaian.
Sekarang, dengan penghematan sekitar $100.000 per area konten inti, termasuk matematika, seni bahasa Inggris dan membaca (ELAR), sains, dan studi sosial, Region 10 dapat menginvestasikan kembali dalam memproduksi konten baru untuk mengembangkan bank item mereka saat ini. TEKSbank sekarang dilengkapi dengan 25% (20.000) pertanyaan canggih yang ditingkatkan dengan teknologi, yang memberikan penilaian pengetahuan yang lebih mendalam dan evaluasi keterampilan siswa yang lebih akurat.
