CompTIA folosește Finetune AI pentru a se extinde rapid fără a sacrifica calitatea

CompTIA accelerează dezvoltarea evaluărilor prin crearea de itemi de testare de înaltă calitate cu Finetune AI, extinzând programul său global de certificare pentru a răspunde cerințelor forței de muncă.

Shutterstock 2463474777

Context

CompTIA este liderul mondial în furnizarea de formare și certificări IT neutre în ceea ce privește furnizorii. Colaborând cu mii de instituții, CompTIA echipează cursanții cu abilități pregătite pentru carieră prin instrumente de învățare de top, credențiale respectate și suport cuprinzător pentru carieră.

Pentru a satisface cererea globală în creștere—în special pentru examenul lor A+—CompTIA a colaborat cu Prometric, folosind Finetune AI pentru o soluție personalizată de inteligență artificială. Această colaborare a permis un proces mai rapid de creare a conținutului, menținând în același timp calitatea, rigurozitatea psihometrică și supravegherea expertă—avansând misiunea CompTIA de a oferi credențiale eficiente, pregătite pentru carieră.

Provocarea

Pe măsură ce cererea globală a crescut, CompTIA a avut nevoie să accelereze crearea de conținut pentru 16 programe de bază. Certificările de volum mare, cum ar fi A+, au reprezentat o provocare deosebită. Fiecare element trebuia să respecte standarde psihometrice riguroase pentru echitate, fiabilitate și apărare legală.

  • Menținerea calității este prea lentă
  • AI-ul general limitează proprietatea intelectuală
  • Experții trebuie să aibă mai mult control

Modelul tradițional de dezvoltare nu putea ține pasul. Era minuțios, dar lent—prea lent pentru nevoile în evoluție ale CompTIA. Echipa avea nevoie de o abordare care să păstreze implicarea experților, rigurosul editorial și proprietatea intelectuală completă, în timp ce permitea o producție mai rapidă.

Shutterstock 2325628103

“Modelele specializate sunt mult mai puțin predispuse la halucinații deoarece au fost antrenate să elimine acest lucru, oferindu-ne doar lucrurile bune.”

Wendy Gavin

Senior Product Manager, Finetune AI

Parteneriat Strategic

CompTIA a lansat o colaborare pe termen lung cu Finetune AI pentru a valorifica inteligența artificială în dezvoltarea item-urilor. Împreună, au creat un model AI specific domeniului Finetune Generate®.

Spre deosebire de instrumentele cu scop general, cum ar fi ChatGPT sau Copilot, Finetune AI este singurul model AI personalizat, patentat în SUA, creat pentru și de profesioniști în evaluare, minimizând halucinațiile și aliniindu-se la standarde editoriale stricte. Certificarea A+ a servit ca pilot datorită conținutului său structurat și a volumului mare de item-uri.

Proiectul a reunit experți Finetune AI, echipele de dezvoltare a conținutului CompTIA și experții în domeniu pentru a antrena modelul pe planuri proprietare, ghiduri de stil și obiective. AI a susținut—dar niciodată nu a înlocuit—autorii experți, împuternicind o redactare și o iterație mai rapide.

Inovare cu Finetune Generate

CompTIA a integrat Finetune Generate® într-un flux de lucru hibrid conceput pentru scalabilitate. Modelul a fost antrenat pe materialele proprii ale CompTIA, asigurându-se că rezultatele se aliniau cu tonul, structura și obiectivele de învățare. SME-urile au făcut adesea puține—dacă nu cumva deloc—revizii la schițele generate de AI.

CompTIA a păstrat întreaga proprietate asupra conținutului asistat de AI, menținând controlul și securitatea. Instrumentul a performat excepțional la obiectivele de nivel 2 și 3 ale lui Bloom—frecvente în certificările de nivel de început precum A+.

Beneficii cheie:

  • Antrenament personalizat al modelului
  • Redactare eficientă
  • IP securizat
  • Ideal pentru niveluri cognitive mai scăzute

“Folosim Generate într-un mod care rezultă în avantaje clare în eficiența QC.”

- Danielle Castelli, Director, Dezvoltare Examene, CompTIA

O revizuire psihometrică a versiunilor 1101 și 1102 ale examenului A+ a validat abordarea. SME-urile au produs 5.7 itemi pe oră—în creștere de la 3.3—majoritatea necesitând editări minime. Standardele psihometrice (dificultate, discriminare, fiabilitate) s-au menținut în limitele așteptate, iar itemii au trecut cu succes de la statutul de pretest la statutul de punctat după testarea pe teren.

„Colaborând cu [Prometric], am reușit să îmbunătățim programul nostru de dezvoltare a examenelor pentru a face procesul mai eficient, într-un mod din care atât dezvoltatorii noștri de teste, cât și experții în domeniu au beneficiat.”

Danielle Castelli

Director, Dezvoltarea Examenelor, CompTIA

Rezultatul

Astăzi, CompTIA continuă să folosească Finetune Generate® pentru certificări cu cerințe cognitive structurate, de nivel inferior—unde viteza și scalabilitatea sunt esențiale. Acest proces îmbunătățit de AI permite experților să se concentreze pe validare mai degrabă decât pe primele versiuni.

  • Creșterea Produsului
  • Eficiența Editorială
  • Equivalența Statistică
  • Viabilitatea Conținutului

Privind înainte, CompTIA explorează cazuri de utilizare suplimentare în care AI-ul responsabil și concentrat poate oferi o valoare similară în întreaga sa portofoliu de certificări—întotdeauna cu un accent pe calitate și control.

Descărcați Povestea de Succes