Iskanje
Zgodbe o uspehu / CompTIA izkorišča Finetune AI

CompTIA izkorišča Finetune AI za hitro širitev brez žrtvovanja kakovosti

CompTIA pospešuje razvoj ocen z ustvarjanjem visokokakovostnih testnih nalog s Finetune AI, s čimer povečuje svoj globalni certifikacijski program, da zadostijo potrebam delovne sile.

Shutterstock 2463474777

Ozadina

CompTIA je vodilni svetovni ponudnik neodvisnega usposabljanja in certifikatov na področju IT. S partnerstvom z več tisoč institucijami CompTIA opremlja učence s spretnostmi, pripravljenimi na kariero, preko najboljših učnih orodij, priznanih certifikatov in celovite podpore pri karieri.

Da bi zadovoljili naraščajoče svetovne potrebe—zlasti za njihov izpit A+—je CompTIA sklenila partnerstvo s podjetjem Prometric in izkoristila Finetune AI za prilagojeno rešitev AI. To partnerstvo je omogočilo hitrejši postopek ustvarjanja vsebin ob ohranjanju kakovosti, psihometrične natančnosti in strokovnega nadzora—kar napreduje v poslanstvu CompTIA, da zagotovi učinkovite, na kariero pripravljene certifikate.

Izziv

Ko je globalna povpraševanje naraslo, je CompTIA potrebovala pospešiti ustvarjanje vsebin v 16 osnovnih programih. Visoko volumen certifikacij, kot je A+, je predstavljal poseben izziv. Vsaka postavka je morala izpolnjevati stroge psihometrične standarde za pravičnost, zanesljivost in pravno zaščito.

  • Ohranjanje kakovosti je prepočasen
  • Splošna umetna inteligenca omejuje lastništvo intelektualne lastnine
  • Strokovnjaki morajo imeti več nadzora

Tradicionalni razvojni model ni mogel držati koraka. Bil je temeljit, a počasen—prepočasen za naraščajoče potrebe CompTIA. Ekipa je potrebovala pristop, ki bi ohranil vključitev strokovnjakov, uredniško strogo presojo in polno lastništvo intelektualne lastnine, hkrati pa omogočil hitrejšo proizvodnjo.

Shutterstock 2325628103

“Specializirani modeli so veliko manj nagnjeni k halucinacijam, ker so bili usposobljeni, da to izločijo, in nam dajo le dobre stvari.”

Wendy Gavin

Senior Product Manager, Finetune AI

Strateško partnerstvo

CompTIA je začela večletno sodelovanje s Finetune AI, da bi izkoristila umetno inteligenco za razvoj predmetov. Skupaj so ustvarili model umetne inteligence Finetune Generate® specifičen za domeno.

Za razliko od orodij splošne rabe, kot sta ChatGPT ali Copilot, je Finetune AI edini prilagojen, patentiran model umetne inteligence v ZDA, zasnovan za in s strani strokovnjakov za ocenjevanje, kar zmanjšuje halucinacije in se usklajuje s strogimi uredniškimi standardi. Certifikat A+ je služil kot pilot zaradi svoje strukturirane vsebine in velikega števila predmetov.

Projekt je združil strokovnjake Finetune AI, ekipe za razvoj vsebin CompTIA in SME, da bi usposobili model na lastniških načrtih, smernicah za slog in ciljih. Umetna inteligenca je podpirala - vendar nikoli nadomestila - avtorstvo SME, kar je omogočilo hitrejše osnutke in ponovitve.

Inoviranje s Finetune Generate

CompTIA je v hibridni delovni tok vgradila Finetune Generate®, zasnovan za obsežno uporabo. Model je bil usposobljen na lastniških materialih CompTIA, kar zagotavlja, da so rezultati usklajeni s tonom, strukturo in učnimi cilji. Strokovnjaki pogosto niso naredili večjih sprememb - če sploh - na osnutkih, ki jih je ustvarila AI.

CompTIA je ohranila polno lastništvo nad vsebino, ki jo je podpirala AI, kar ji omogoča nadzor in varnost. Orodje je izjemno dobro delovalo pri Bloomovih ciljih 2 in 3 - ki so pogosti pri certifikacijah na začetni ravni, kot je A+.

Ključne prednosti:

  • Usposabljanje po meri modela
  • Učinkovito pripravljanje osnutkov
  • Varnost intelektualne lastnine
  • Idealno za nižje kognitivne ravni

“Finetune Generate uporabljamo na način, ki prinaša jasne prednosti v učinkovitosti QC.”

- Danielle Castelli, direktorica, razvoj izpitov, CompTIA

Psihometrični pregled različic izpita A+ 1101 in 1102 je potrdil pristop. Strokovnjaki so ustvarili 5,7 nalog na uro - kar je več od 3,3 - pri čemer je večina potrebovala minimalne popravke. Psihometrične meje (težavnost, diskriminacija, zanesljivost) so ostale znotraj pričakovanih razponov, naloge pa so uspešno prešle iz predtestnega v ocenjeno stanje po terenskem testiranju.

“Z delom s [Prometric] smo lahko izboljšali naš program razvoja izpitov, da smo proces naredili bolj učinkovit, kar je koristilo tako našim razvijalcem testov kot tudi strokovnjakom.”

Danielle Castelli

Direktor, razvoj izpitov, CompTIA

Rezultat

Danes CompTIA še naprej uporablja Finetune Generate® za certifikate z strukturiranimi, nižjimi kognitivnimi zahtevami—kjer sta hitrost in skalabilnost ključna. Ta postopek, obogaten z umetno inteligenco, omogoča strokovnjakom, da se osredotočijo na potrjevanje namesto na prve osnutke.

  • Povečana proizvodnja
  • Uredniška učinkovitost
  • Statistična ekvivalenca
  • Življenjska sposobnost vsebine

Gledajoč naprej, CompTIA raziskuje dodatne primere uporabe, kjer lahko osredotočena, odgovorna umetna inteligenca prinese podobno vrednost v njenem portfelju certifikatov—vedno s poudarkom na kakovosti in nadzoru.

Prenesite zgodbo o uspehu