Suche
Erfolgsgeschichten / CompTIA nutzt Finetune AI

CompTIA nutzt Finetune AI, um schnell zu skalieren, ohne die Qualität zu opfern.

CompTIA beschleunigt die Entwicklung von Bewertungen, indem es hochwertige Testfragen mit Finetune AI erstellt und sein globales Zertifizierungsprogramm an die Anforderungen des Arbeitsmarktes anpasst.

Shutterstock 2463474777

Hintergrund

CompTIA ist der weltweit führende Anbieter von herstellerneutralen IT-Schulungen und -Zertifizierungen. In Partnerschaft mit Tausenden von Institutionen stattet CompTIA Lernende mit berufsbereiten Fähigkeiten durch erstklassige Lernwerkzeuge, angesehene Qualifikationen und umfassende Karriereunterstützung aus.

Um der wachsenden globalen Nachfrage - insbesondere für ihre A+-Prüfung - gerecht zu werden, arbeitete CompTIA mit Prometric zusammen und nutzte Finetune AI für eine maßgeschneiderte KI-Lösung. Diese Partnerschaft ermöglichte einen schnelleren Inhaltserstellungsprozess, während Qualität, psychometrische Strenge und Expertenaufsicht beibehalten wurden - und damit CompTIAs Mission vorantreiben, effiziente, berufsbereite Qualifikationen zu liefern.

Die Herausforderung

Als die globale Nachfrage anstieg, musste CompTIA die Inhaltserstellung für 16 Kernprogramme beschleunigen. Hochvolumige Zertifizierungen wie A+ stellten eine besondere Herausforderung dar. Jedes Element musste strengen psychometrischen Standards für Fairness, Zuverlässigkeit und rechtliche Verteidigung entsprechen.

  • Die Qualität aufrechtzuerhalten ist zu langsam
  • Allgemeine KI schränkt das geistige Eigentum ein
  • Fachexperten müssen mehr Kontrolle haben

Das traditionelle Entwicklungsmodell konnte nicht mithalten. Es war gründlich, aber langsam – zu langsam für die sich entwickelnden Bedürfnisse von CompTIA. Das Team benötigte einen Ansatz, der die Beteiligung von Fachexperten, redaktionelle Strenge und vollständiges geistiges Eigentum bewahrt, während er schnellere Ergebnisse ermöglicht.

Shutterstock 2325628103

“Spezialisierte Modelle sind viel weniger anfällig für Halluzinationen, da sie darauf trainiert wurden, das herauszufiltern und uns nur die guten Informationen zu geben.”

Wendy Gavin

Senior Product Manager, Finetune AI

Strategische Partnerschaft

CompTIA hat eine mehrjährige Zusammenarbeit mit Finetune AI gestartet, um künstliche Intelligenz für die Entwicklung von Prüfungsfragen zu nutzen. Gemeinsam haben sie ein domänenspezifisches KI-Modell namens Finetune Generate® entwickelt.

Im Gegensatz zu allgemeinen Werkzeugen wie ChatGPT oder Copilot ist Finetune AI das einzige maßgeschneiderte, patentierte KI-Modell in den USA, das für und von Fachleuten für Bewertungen entwickelt wurde, wodurch Halluzinationen minimiert und strengen redaktionellen Standards entsprochen wird. Die A+ Zertifizierung diente als Pilotprojekt aufgrund ihres strukturierten Inhalts und des hohen Fragenvolumens.

Das Projekt brachte Experten von Finetune AI, CompTIA-Content-Entwicklungsteams und Fachexperten zusammen, um das Modell mit proprietären Vorlagen, Stilrichtlinien und Zielen zu trainieren. Die KI unterstützte – ersetzte jedoch niemals – die Autorenschaft von Fachexperten und ermöglichte schnellere Entwürfe und Iterationen.

Innovationen mit Finetune Generate

CompTIA hat Finetune Generate® in einen hybriden Workflow integriert, der für Skalierung ausgelegt ist. Das Modell wurde mit den proprietären Materialien von CompTIA trainiert, um sicherzustellen, dass die Ergebnisse mit Ton, Struktur und Lernzielen übereinstimmen. SMEs mussten oft nur wenige - wenn überhaupt - Änderungen an den von der KI generierten Entwürfen vornehmen.

CompTIA behielt das volle Eigentum an den KI-unterstützten Inhalten und stellte die Kontrolle und Sicherheit sicher. Das Tool schnitt in den Zielen der Bloom-Ebenen 2 und 3 außergewöhnlich gut ab - häufig in Einstiegszertifizierungen wie A+.

Wesentliche Vorteile:

  • Benutzerdefiniertes Modelltraining
  • Effizientes Entwerfen
  • Sichere IP
  • Ideal für niedrigere kognitive Ebenen

„Wir nutzen Generate auf eine Weise, die klare Vorteile in der QC-Effizienz bringt.“

- Danielle Castelli, Direktorin, Prüfungsentwicklung, CompTIA

Eine psychometrische Überprüfung der A+-Prüfungsversionen 1101 und 1102 validierte den Ansatz. SMEs produzierten 5,7 Artikel pro Stunde - ein Anstieg von 3,3 - wobei die meisten nur minimale Änderungen benötigten. Psychometrische Benchmarks (Schwierigkeit, Diskriminierung, Zuverlässigkeit) blieben innerhalb der erwarteten Bereiche, und Artikel bewegten sich nach der Feldtestung erfolgreich vom Pretest- in den Bewertungsstatus.

„Die Zusammenarbeit mit [Prometric] hat es uns ermöglicht, unser Prüfungsentwicklungsprogramm zu erweitern, um den Prozess effizienter zu gestalten, wovon sowohl unsere Prüfer als auch die Fachexperten profitiert haben.“

Danielle Castelli

Direktor, Prüfungsentwicklung, CompTIA

Ergebnis

Heute verwendet CompTIA weiterhin Finetune Generate® für Zertifizierungen mit strukturierten, niedrigeren kognitiven Anforderungen – wo Geschwindigkeit und Skalierbarkeit entscheidend sind. Dieser KI-unterstützte Prozess ermöglicht es Fachexperten, sich auf die Validierung anstatt auf erste Entwürfe zu konzentrieren.

  • Erhöhte Ausgabe
  • Redaktionelle Effizienz
  • Statistische Äquivalenz
  • Inhaltliche Lebensfähigkeit

Mit Blick auf die Zukunft untersucht CompTIA weitere Anwendungsfälle, in denen fokussierte, verantwortungsvolle KI ähnlichen Wert in seinem Zertifizierungsportfolio bieten kann – immer mit einem Schwerpunkt auf Qualität und Kontrolle.

Download Erfolgsbericht