Søg
Succeshistorier / CompTIA udnytter Finetune AI

CompTIA udnytter Finetune AI til hurtigt at skalere uden at gå på kompromis med kvaliteten.

CompTIA fremskynder udviklingen af vurderinger ved at skabe testelementer af høj kvalitet med Finetune AI, hvilket skalerer sit globale certificeringsprogram for at imødekomme arbejdsstyrkens behov.

Shutterstock 2463474777

Baggrund

CompTIA er verdens førende udbyder af leverandørneutral IT-uddannelse og certificeringer. Ved at samarbejde med tusindvis af institutioner udstyrer CompTIA lærende med karriererettede færdigheder gennem førsteklasses læringsværktøjer, respekterede kvalifikationer og omfattende karrierestøtte.

For at imødekomme den voksende globale efterspørgsel—især for deres A+ eksamen—indgik CompTIA et partnerskab med Prometric, der udnyttede Finetune AI til en skræddersyet AI-løsning. Dette partnerskab muliggørede en hurtigere indholdsproduktionsproces, samtidig med at kvalitet, psykometrisk stringens og ekspertvurdering blev opretholdt—og fremmede CompTIAs mission om at levere effektive, karriererettede kvalifikationer.

Utfordringen

Efterhånden som den globale efterspørgsel steg, havde CompTIA brug for at accelerere indholdsoprettelse på tværs af 16 kerneprogrammer. Højvolumen-certificeringer som A+ udgjorde en særlig udfordring. Hvert element skulle opfylde strenge psykometriske standarder for retfærdighed, pålidelighed og juridisk forsvarlighed.

  • At opretholde kvalitet er for langsomt
  • Generel AI begrænser IP-ejerskab
  • SME'er skal have mere kontrol

Den traditionelle udviklingsmodel kunne ikke følge med. Den var grundig, men langsom - for langsom til CompTIAs udviklende behov. Teamet havde brug for en tilgang, der bevarede SME-involvering, redaktionel strenghed og fuldt IP-ejerskab, samtidig med at den muliggik hurtigere output.

Shutterstock 2325628103

“Specialiserede modeller er meget mindre tilbøjelige til hallucinationer, fordi de er blevet trænet til at fjerne det, og give os kun det gode.”

Wendy Gavin

Senior Product Manager, Finetune AI

Strategisk Partnerskab

CompTIA lancerede et flerårigt samarbejde med Finetune AI for at udnytte kunstig intelligens til udvikling af spørgsmål. Sammen skabte de en Finetune Generate® domænespecifik AI-model.

Forskellen fra generelle værktøjer som ChatGPT eller Copilot er, at Finetune AI er den eneste tilpassede, patenterede AI-model i USA designet til og af vurderingsprofessionelle, hvilket minimerer hallucinationer og er i overensstemmelse med strenge redaktionelle standarder. A+-certificeringen fungerede som pilot på grund af sit strukturerede indhold og høje spørgsmålsværdi.

Projektet samlede eksperter fra Finetune AI, CompTIAs indholdudviklingsteams og SME'er for at træne modellen på proprietære skabeloner, stilguider og mål. AI'en støttede—men erstattede aldrig—SME-forfatterskab, hvilket gav mulighed for hurtigere udkast og iteration.

Innovation med Finetune Generate

CompTIA indbyggede Finetune Generate® i en hybrid arbejdsproces designet til skala. Modellen blev trænet på CompTIAs ejendommelig materiale, hvilket sikrede, at output var i overensstemmelse med tone, struktur og læringsmål. Fagfolk lavede ofte få - hvis nogen - revisioner til de AI-genererede udkast.

CompTIA beholdt fuld ejerskab af AI-assisteret indhold, hvilket opretholdt kontrol og sikkerhed. Værktøjet præsterede exceptionelt godt på Blooms niveau 2 og 3 mål - ofte set i entry-level certificeringer som A+.

Nøglefordele:

  • Tilpasset Modeltræning
  • Effektiv Udkastning
  • Sikker IP
  • Ideel til Lavere Kognitive Niveauer

“Vi bruger Generate på en måde, der resulterer i klare fordele i QC effektivitet.”

- Danielle Castelli, Direktør, Eksamenudvikling, CompTIA

En psychometrisk gennemgang af A+ eksamensversioner 1101 og 1102 validerede tilgangen. Fagfolk producerede 5.7 elementer pr. time - op fra 3.3 - hvoraf de fleste kun havde brug for minimale redigeringer. Psychometriske benchmarks (sværhedsgrad, diskrimination, pålidelighed) forblev inden for forventede intervaller, og elementer blev succesfuldt flyttet fra pretest til scoret status efter feltprøvning.

“Ved at arbejde sammen med [Prometric] har vi været i stand til at forbedre vores eksamensudviklingsprogram for at gøre processen mere effektiv på en måde, som både vores testudviklere og faglige eksperter har haft gavn af.”

Danielle Castelli

Direktør, Prøveudvikling, CompTIA

Resultat

I dag fortsætter CompTIA med at bruge Finetune Generate® til certificeringer med strukturerede, lavere kognitive krav—hvor hastighed og skalerbarhed er nøglefaktorer. Denne AI-forstærkede proces lader SME'er koncentrere sig om validering frem for første udkast.

  • Øget Output
  • Redaktionel Effektivitet
  • Statistisk Ækvivalens
  • Indholds Levedygtighed

Når vi ser fremad, udforsker CompTIA yderligere anvendelsessager, hvor fokuseret, ansvarlig AI kan levere lignende værdi på tværs af sin certificeringsportefølje—altid med fokus på kvalitet og kontrol.

Download Succes Historie