CompTIA wykorzystuje Finetune AI, aby szybko się rozwijać bez poświęcania jakości.

CompTIA przyspiesza rozwój ocen, tworząc wysokiej jakości pytania testowe za pomocą Finetune AI, skalując swój globalny program certyfikacji, aby sprostać wymaganiom rynku pracy.

Shutterstock 2463474777

Tło

CompTIA jest wiodącym na świecie dostawcą szkoleń i certyfikacji IT neutralnych wobec dostawców. Współpracując z tysiącami instytucji, CompTIA wyposaża uczniów w umiejętności gotowe do pracy poprzez najlepsze narzędzia edukacyjne, szanowane kwalifikacje i kompleksowe wsparcie kariery.

Aby sprostać rosnącemu globalnemu zapotrzebowaniu—szczególnie na egzamin A+—CompTIA nawiązała współpracę z Prometric, wykorzystując Finetune AI do stworzenia niestandardowego rozwiązania AI. Ta współpraca umożliwiła szybszy proces tworzenia treści, zachowując jednocześnie jakość, rygor psychometryczny i nadzór ekspertów—posuwając misję CompTIA do przodu w dostarczaniu efektywnych, gotowych do pracy kwalifikacji.

Wyzwanie

W miarę wzrostu globalnego popytu, CompTIA musiała przyspieszyć tworzenie treści w ramach 16 podstawowych programów. Certyfikaty o dużej objętości, takie jak A+, stanowiły szczególne wyzwanie. Każdy element musiał spełniać rygorystyczne standardy psychometryczne dotyczące uczciwości, niezawodności i ochrony prawnej.

  • Utrzymanie jakości jest zbyt wolne
  • Ogólny AI ogranicza własność IP
  • Eksperci muszą mieć większą kontrolę

Tradycyjny model rozwoju nie mógł nadążyć. Był dokładny, ale wolny — zbyt wolny dla ewoluujących potrzeb CompTIA. Zespół potrzebował podejścia, które zachowa zaangażowanie ekspertów, rygor redakcyjny oraz pełną własność IP, jednocześnie umożliwiając szybsze wyniki.

Shutterstock 2325628103

“Modele specjalistyczne są znacznie mniej podatne na halucynacje, ponieważ zostały wytrenowane, aby to wyeliminować, dając nam tylko dobre informacje.”

Wendy Gavin

Senior Product Manager, Finetune AI

Partnerstwo Strategiczne

CompTIA rozpoczęła wieloletnią współpracę z Finetune AI, aby wykorzystać sztuczną inteligencję do opracowywania zadań. Wspólnie stworzyli model AI specyficzny dla domeny Finetune Generate®.

W przeciwieństwie do narzędzi ogólnego przeznaczenia, takich jak ChatGPT czy Copilot, Finetune AI jest jedynym niestandardowym, opatentowanym modelem AI w USA zaprojektowanym dla profesjonalistów oceniających i przez nich, minimalizującym halucynacje i zgodnym z rygorystycznymi standardami redakcyjnymi. Certyfikacja A+ służyła jako pilotażowa z powodu swojej uporządkowanej treści i dużej liczby zadań.

Projekt zgromadził ekspertów Finetune AI, zespoły rozwoju treści CompTIA oraz ekspertów branżowych (SME), aby szkolić model na podstawie zastrzeżonych wzorów, przewodników stylu i celów. AI wspierało—ale nigdy nie zastępowało—autorstwa SME, umożliwiając szybsze tworzenie i iterację.

Innowacje z Finetune Generate

CompTIA wbudowała Finetune Generate® w hybrydowy przepływ pracy zaprojektowany do skali. Model został wytrenowany na własnych materiałach CompTIA, zapewniając, że wyniki są zgodne z tonem, strukturą i celami nauczania. Eksperci często wprowadzali niewiele - jeśli w ogóle - poprawek do szkiców wygenerowanych przez AI.

CompTIA zachowała pełne prawa własności do treści wspomaganych przez AI, utrzymując kontrolę i bezpieczeństwo. Narzędzie działało wyjątkowo dobrze w celach poziomu 2 i 3 według Blooma - często występujących w certyfikatach na poziomie podstawowym, takich jak A+.

Kluczowe korzyści:

  • Szkolenie modelu na zamówienie
  • Efektywne tworzenie szkiców
  • Bezpieczne IP
  • Idealne dla niższych poziomów poznawczych

„Używamy Generate w sposób, który przynosi wyraźne korzyści w efektywności QC.”

- Danielle Castelli, Dyrektor, Rozwój Egzaminów, CompTIA

Przegląd psychometryczny wersji egzaminu A+ 1101 i 1102 potwierdził podejście. Eksperci wyprodukowali 5,7 pozycji na godzinę - wzrost z 3,3 - przy czym większość potrzebowała minimalnych poprawek. Benchmarki psychometryczne (trudność, dyskryminacja, niezawodność) pozostały w oczekiwanych zakresach, a pozycje pomyślnie przeszły z statusu przedtestowego do ocenianego po badaniach terenowych.

“Pracując z [Prometric], udało nam się wzmocnić nasz program rozwoju egzaminów, aby uczynić proces bardziej efektywnym w sposób, który przyniósł korzyści zarówno naszym twórcom testów, jak i ekspertom w danej dziedzinie.”

Danielle Castelli

Dyrektor, Rozwój Egzaminów, CompTIA

Wynik

Dziś CompTIA nadal wykorzystuje Finetune Generate® do certyfikacji z uporządkowanymi, niższymi wymaganiami poznawczymi—gdzie kluczowe są szybkość i skalowalność. Ten wzbogacony o AI proces pozwala ekspertom skoncentrować się na walidacji, a nie na pierwszych wersjach.

  • Zwiększona Produkcja
  • Efektywność Redakcyjna
  • Równoważność Statystyczna
  • Wykonalność Treści

Patrząc w przyszłość, CompTIA bada dodatkowe przypadki użycia, w których skoncentrowana, odpowiedzialna AI może przynieść podobną wartość w całym swoim portfolio certyfikacyjnym—zawsze z naciskiem na jakość i kontrolę.

Pobierz historię sukcesu