CompTIA memanfaatkan Finetune AI untuk berkembang pesat tanpa mengorbankan kualitas

CompTIA mempercepat pengembangan penilaian dengan menciptakan item tes berkualitas tinggi menggunakan Finetune AI, meningkatkan program sertifikasi globalnya untuk memenuhi tuntutan tenaga kerja.

Shutterstock 2463474777

Latar Belakang

CompTIA adalah penyedia pelatihan dan sertifikasi TI yang netral terhadap vendor terkemuka di dunia. Bekerja sama dengan ribuan institusi, CompTIA membekali para pelajar dengan keterampilan yang siap untuk karier melalui alat pembelajaran terbaik, kredensial yang dihormati, dan dukungan karier yang komprehensif.

Untuk memenuhi permintaan global yang semakin meningkat—terutama untuk ujian A+ mereka—CompTIA bermitra dengan Prometric, memanfaatkan Finetune AI untuk solusi AI kustom. Kemitraan ini memungkinkan proses pembuatan konten yang lebih cepat sambil menjaga kualitas, ketelitian psikometrik, dan pengawasan ahli—memajukan misi CompTIA untuk memberikan kredensial yang efisien dan siap untuk karier.

Tantangan

Ketika permintaan global melonjak, CompTIA perlu mempercepat pembuatan konten di 16 program inti. Sertifikasi dengan volume tinggi seperti A+ menjadi tantangan tersendiri. Setiap item harus memenuhi standar psikometrik yang ketat untuk keadilan, keandalan, dan pertahanan hukum.

  • Mempertahankan kualitas terlalu lambat
  • AI umum membatasi kepemilikan IP
  • SME perlu lebih mengendalikan

Model pengembangan tradisional tidak dapat mengikuti. Itu menyeluruh tetapi lambat—terlalu lambat untuk kebutuhan CompTIA yang terus berkembang. Tim membutuhkan pendekatan yang mempertahankan keterlibatan SME, ketelitian editorial, dan kepemilikan IP penuh, sambil memungkinkan keluaran yang lebih cepat.

Shutterstock 2325628103

“Model yang khusus jauh lebih sedikit rentan terhadap halusinasi karena telah dilatih untuk menghilangkan itu, memberikan kita hanya hal-hal yang baik.”

Wendy Gavin

Senior Product Manager, Finetune AI

Kemitraan Strategis

CompTIA meluncurkan kolaborasi multi-tahun dengan Finetune AI untuk memanfaatkan kecerdasan buatan dalam pengembangan item. Bersama-sama, mereka menciptakan model AI spesifik domain Finetune Generate®.

Berbeda dengan alat umum seperti ChatGPT atau Copilot, Finetune AI adalah satu-satunya model AI khusus yang dipatenkan di AS yang dirancang untuk dan oleh para profesional penilaian, meminimalkan halusinasi dan selaras dengan standar editorial yang ketat. Sertifikasi A+ digunakan sebagai proyek percontohan karena kontennya yang terstruktur dan volume item yang tinggi.

Proyek ini mempertemukan para ahli Finetune AI, tim pengembangan konten CompTIA, dan SME untuk melatih model berdasarkan cetak biru, panduan gaya, dan tujuan yang dimiliki. AI mendukung—tetapi tidak pernah menggantikan—kepengarangan SME, memberdayakan penyusunan dan iterasi yang lebih cepat.

Inovasi dengan Finetune Generate

CompTIA menyematkan Finetune Generate® ke dalam alur kerja hibrida yang dirancang untuk skala. Model ini dilatih menggunakan materi kepemilikan CompTIA, memastikan hasil yang selaras dengan nada, struktur, dan tujuan pembelajaran. SME sering kali melakukan sedikit—jika ada—revisi terhadap draf yang dihasilkan oleh AI.

CompTIA mempertahankan kepemilikan penuh atas konten yang dibantu AI, menjaga kontrol dan keamanan. Alat ini berkinerja sangat baik pada tujuan Tingkat 2 dan 3 Bloom—sering terlihat pada sertifikasi tingkat pemula seperti A+.

Manfaat Utama:

  • Pelatihan Model Kustom
  • Penyusunan yang Efisien
  • IP Aman
  • Ideal untuk Tingkat Kognitif yang Lebih Rendah

“Kami menggunakan Generate dengan cara yang menghasilkan keuntungan yang jelas dalam efisiensi QC.”

- Danielle Castelli, Direktur, Pengembangan Ujian, CompTIA

Ulasan psikometrik tentang versi ujian A+ 1101 dan 1102 memvalidasi pendekatan ini. SME menghasilkan 5,7 item per jam—naik dari 3,3—dengan sebagian besar memerlukan sedikit revisi. Tolok ukur psikometrik (kesulitan, diskriminasi, keandalan) tetap dalam rentang yang diharapkan, dan item berhasil berpindah dari status pra-tes ke status yang dinilai setelah pengujian lapangan.

"Bekerja sama dengan [Prometric], kami telah dapat meningkatkan program pengembangan ujian kami untuk membuat proses lebih efisien dengan cara yang menguntungkan baik pengembang ujian kami maupun SME."

Danielle Castelli

Direktur, Pengembangan Ujian, CompTIA

Hasil

Hari ini, CompTIA terus menggunakan Finetune Generate® untuk sertifikasi dengan tuntutan kognitif yang terstruktur dan lebih rendah—di mana kecepatan dan skalabilitas adalah kunci. Proses yang ditingkatkan AI ini memungkinkan SME fokus pada validasi daripada draf pertama.

  • Output yang Ditingkatkan
  • Efisiensi Editorial
  • Kesetaraan Statistik
  • Kelayakan Konten

Melihat ke depan, CompTIA sedang menjelajahi kasus penggunaan tambahan di mana AI yang terfokus dan bertanggung jawab dapat memberikan nilai serupa di seluruh portofolio sertifikasinya—selalu dengan penekanan pada kualitas dan kontrol.

Download Kisah Sukses