Zoeken
Succesverhalen / CompTIA benut Finetune AI

CompTIA benut Finetune AI om snel te schalen zonder in te boeten op kwaliteit

CompTIA versnelt de ontwikkeling van beoordelingen door hoogwaardige testitems te creëren met Finetune AI, waarmee het wereldwijde certificeringsprogramma wordt opgeschaald om te voldoen aan de eisen van de arbeidsmarkt.

Shutterstock 2463474777

Achtergrond

CompTIA is de wereldwijde toonaangevende aanbieder van vendor-neutrale IT-training en certificeringen. In samenwerking met duizenden instellingen voorziet CompTIA leerlingen van carrièreklare vaardigheden via eersteklas leermiddelen, gerespecteerde certificaten en uitgebreide loopbaanondersteuning.

Om te voldoen aan de groeiende wereldwijde vraag—vooral voor hun A+ examen—heeft CompTIA samengewerkt met Prometric, waarbij gebruik werd gemaakt van Finetune AI voor een op maat gemaakte AI-oplossing. Deze samenwerking maakte een snellere contentcreatie mogelijk, terwijl de kwaliteit, psychometrische strengheid en deskundige supervisie behouden bleven—en bevorderde CompTIA's missie om efficiënte, carrièreklare certificaten te leveren.

De Uitdaging

Toen de wereldwijde vraag steeg, moest CompTIA de contentcreatie versnellen voor 16 kernprogramma's. Certificeringen met een hoog volume zoals A+ vormden een bijzondere uitdaging. Elk item moest voldoen aan strenge psychometrische normen voor eerlijkheid, betrouwbaarheid en juridische verdediging.

  • Kwaliteit behouden gaat te langzaam
  • Algemene AI beperkt IP-eigendom
  • SME's moeten meer controle hebben

Het traditionele ontwikkelingsmodel kon niet bijhouden. Het was grondig maar traag—te traag voor de veranderende behoeften van CompTIA. Het team had een aanpak nodig die de betrokkenheid van SME's, redactionele nauwkeurigheid en volledig IP-eigendom behield, terwijl het een snellere output mogelijk maakte.

Shutterstock 2325628103

“Gespecialiseerde modellen zijn veel minder vatbaar voor hallucinaties omdat ze zijn getraind om dat eruit te filteren, en ons alleen het goede materiaal te geven.”

Wendy Gavin

Senior Product Manager, Finetune AI

Strategisch Partnerschap

CompTIA lanceerde een meerjarige samenwerking met Finetune AI om kunstmatige intelligentie te benutten voor itemontwikkeling. Samen creëerden ze een Finetune Generate® domeinspecifiek AI-model.

In tegenstelling tot algemene tools zoals ChatGPT of Copilot, is Finetune AI het enige aangepaste, gepatenteerde AI-model in de VS dat is ontworpen voor en door beoordelingsprofessionals, wat hallucinaties minimaliseert en aansluit bij strikte redactionele normen. De A+ certificering diende als proefproject vanwege de gestructureerde inhoud en het hoge aantal items.

Het project bracht experts van Finetune AI, contentontwikkelingsteams van CompTIA en SME's samen om het model te trainen op eigen blauwdrukken, stijlgidsen en doelstellingen. De AI ondersteunde - maar verving nooit - de auteurschap van SME's, waardoor snellere conceptie en iteratie mogelijk werden.

Innovatie met Finetune Generate

CompTIA heeft Finetune Generate® geïntegreerd in een hybride workflow die is ontworpen voor schaalvergroting. Het model is getraind op de eigendommelijke materialen van CompTIA, waardoor de uitkomsten in lijn waren met toon, structuur en leerdoelen. SME's maakten vaak weinig - zo niet geen - revisies aan de door AI gegenereerde concepten.

CompTIA behield de volledige eigendom van AI-ondersteunde inhoud, waardoor controle en veiligheid gewaarborgd bleven. De tool presteerde uitzonderlijk goed op Bloom’s Niveau 2 en 3 doelstellingen - vaak voorkomende in instapcertificeringen zoals A+.

Belangrijkste voordelen:

  • Aangepaste modeltraining
  • Efficiënt opstellen
  • Veilige IP
  • Ideaal voor lagere cognitieve niveaus

“We gebruiken Generate op een manier die resulteert in duidelijke voordelen in QC-efficiëntie.”

- Danielle Castelli, Directeur, Exam Development, CompTIA

Een psychometrische review van A+ examenversies 1101 en 1102 valideerde de aanpak. SME's produceerden 5,7 items per uur - een stijging van 3,3 - waarbij de meeste minimale aanpassingen nodig hadden. Psychometrische benchmarks (moeilijkheid, discriminatie, betrouwbaarheid) bleven binnen de verwachte ranges, en items werden succesvol verplaatst van pretest naar gescoord status na veldtesten.

“Door samen te werken met [Prometric] hebben we ons examenontwikkelingsprogramma kunnen uitbreiden om het proces efficiënter te maken, waardoor zowel onze testontwikkelaars als SME's er voordeel uit hebben gehaald.”

Danielle Castelli

Directeur, Examenontwikkeling, CompTIA

Resultaat

Vandaag de dag blijft CompTIA Finetune Generate® gebruiken voor certificeringen met gestructureerde, lagere cognitieve eisen—waar snelheid en schaalbaarheid essentieel zijn. Dit AI-verbeterde proces stelt SME's in staat om zich te concentreren op validatie in plaats van op eerste versies.

  • Verhoogde Output
  • Redactionele Efficiëntie
  • Statistische Equivalentie
  • Inhoudelijke Levensvatbaarheid

Vooruitkijkend verkent CompTIA aanvullende gebruikstoepassingen waar gerichte, verantwoordelijke AI vergelijkbare waarde kan leveren binnen haar certificeringsportfolio—altijd met een nadruk op kwaliteit en controle.

Download Succesverhaal