CompTIA koristi Finetune AI za brzo skaliranje bez žrtvovanja kvalitete

CompTIA ubrzava razvoj procjena stvaranjem visokokvalitetnih ispitnih zadataka s Finetune AI, skalirajući svoj globalni program certifikacije kako bi zadovoljio potrebe radne snage.

Shutterstock 2463474777

Pozadina

CompTIA je vodeći svjetski pružatelj IT obuke i certifikacija koji nisu vezani uz dobavljače. U partnerstvu s tisućama institucija, CompTIA oprema učenike vještinama spremnim za karijeru putem najboljih alata za učenje, cijenjenih akreditacija i sveobuhvatne podrške za karijeru.

Kako bi zadovoljila rastuću globalnu potražnju—posebno za njihov A+ ispit—CompTIA je sklopila partnerstvo s Prometric, koristeći Finetune AI za prilagođeno AI rješenje. Ovo partnerstvo omogućilo je brži proces stvaranja sadržaja uz održavanje kvalitete, psihometrijske rigoroznosti i stručnog nadzora—napredujući misiju CompTIA-e da pruži učinkovite, akreditacije spremne za karijeru.

Izazov

Kako je globalna potražnja naglo porasla, CompTIA je trebala ubrzati stvaranje sadržaja za 16 osnovnih programa. Certifikati visokog volumena poput A+ predstavljali su poseban izazov. Svaka stavka morala je zadovoljiti stroge psihometrijske standarde za pravednost, pouzdanost i pravnu obranu.

  • Održavanje kvalitete je presporo
  • Opća AI ograničava vlasništvo nad IP-om
  • SME-ovi trebaju imati više kontrole

Tradicionalni razvojni model nije mogao pratiti. Bio je temeljit, ali spor—previše spor za evolucijske potrebe CompTIA-e. Tim je trebao pristup koji bi očuvao sudjelovanje SME-a, uredničku rigoroznost i potpuno vlasništvo nad IP-om, dok bi omogućio bržu proizvodnju.

Shutterstock 2325628103

“Specijalizirani modeli mnogo su manje skloni halucinacijama jer su obučeni da to isključe, dajući nam samo dobre informacije.”

Wendy Gavin

Stariji menadžer proizvoda, Finetune AI

Strateško partnerstvo

CompTIA je pokrenula višegodišnju suradnju s Finetune AI kako bi iskoristila umjetnu inteligenciju za razvoj stavki. Zajedno su kreirali Finetune Generate® model specifičan za domenu.

Za razliku od alata opće namjene poput ChatGPT-a ili Copilota, Finetune AI je jedini prilagođeni, patentirani AI model u SAD-u koji je dizajniran za i od strane stručnjaka za procjenu, minimizirajući halucinacije i usklađujući se s rigoroznim uredničkim standardima. A+ certifikacija poslužila je kao pilot zbog svog strukturiranog sadržaja i velikog volumena stavki.

Projekt je okupio stručnjake iz Finetune AI, timove za razvoj sadržaja CompTIA i SME-ove kako bi obučili model na vlasničkim planovima, stilskim vodičima i ciljevima. AI je podržavao—ali nikada nije zamijenio—autorstvo SME-a, omogućujući brže pisanje i iteraciju.

Inoviranje s Finetune Generate

CompTIA je integrirao Finetune Generate® u hibridni radni tok dizajniran za skaliranje. Model je treniran na vlasničkim materijalima CompTIA-e, osiguravajući da su rezultati usklađeni s tonom, strukturom i ciljevima učenja. Stručnjaci za sadržaj obično su napravili malo—ako ne i ikakvih—revizija na AI-generiranim nacrtima.

CompTIA je zadržala potpuno vlasništvo nad sadržajem uz podršku AI-a, održavajući kontrolu i sigurnost. Alat je izvanredno funkcionirao na Bloomovim razinama 2 i 3—često u certifikacijama na početnoj razini poput A+.

Ključne prednosti:

  • Prilagođeno treniranje modela
  • Učinkovito sastavljanje nacrta
  • Sigurno intelektualno vlasništvo
  • Idealno za niže kognitivne razine

“Koristimo Generate na način koji rezultira jasnim prednostima u učinkovitosti QC-a.”

- Danielle Castelli, direktorica, razvoj ispita, CompTIA

Psiho-metrička revizija verzija ispita A+ 1101 i 1102 potvrdila je pristup. Stručnjaci za sadržaj proizveli su 5.7 stavki po satu—povećano s 3.3—s većinom koja je trebala minimalne izmjene. Psiho-metričke referentne točke (težina, diskriminacija, pouzdanost) ostale su unutar očekivanih raspona, a stavke su uspješno prešle iz statusa predtesta u ocijenjeni status nakon terenskog testiranja.

“Radom s [Prometric], uspjeli smo poboljšati naš program razvoja ispita kako bismo učinili proces učinkovitijim na način koji je koristio i našim razvojnim timovima za ispite i stručnjacima.”

Danielle Castelli

Direktor, Razvoj ispita, CompTIA

Ishod

Danas, CompTIA nastavlja koristiti Finetune Generate® za certifikate s strukturiranim, nižim kognitivnim zahtjevima—gdje su brzina i skalabilnost ključni. Ovaj proces poboljšan umjetnom inteligencijom omogućuje stručnjacima da se usmjere na validaciju umjesto na prve nacrte.

  • Povećana proizvodnja
  • Urednička učinkovitost
  • Statistička ekvivalencija
  • Održivost sadržaja

Gledajući unaprijed, CompTIA istražuje dodatne slučajeve upotrebe gdje fokusirana, odgovorna AI može pružiti sličnu vrijednost kroz svoj portfelj certifikata—uvijek s naglaskom na kvalitetu i kontrolu.

Preuzmi Priču o uspjehu