CompTIAは、品質を犠牲にすることなく迅速にスケールするためにFinetune AIを活用しています。

CompTIAは、Finetune AIを使用して高品質なテスト項目を作成することで評価開発を加速し、労働力の需要に応えるためにグローバル認証プログラムを拡大しています。

Shutterstock 2463474777

背景

CompTIAは、ベンダーニュートラルなITトレーニングと認証の世界的なリーディングプロバイダーです。何千もの機関と提携し、CompTIAは最高の学習ツール、尊敬される資格、および包括的なキャリアサポートを通じて、学習者にキャリア準備が整ったスキルを提供します。

特にA+試験に対する世界的な需要の高まりに応えるために、CompTIAはPrometricと提携し、カスタムAIソリューションのためにFinetune AIを活用しました。この提携により、質、心理測定の厳格さ、専門家の監視を維持しながら、より迅速なコンテンツ作成プロセスが可能になりました。これにより、CompTIAの効率的でキャリア準備が整った資格を提供するという使命が進展しました。

挑戦

グローバルな需要が急増する中で、CompTIAは16のコアプログラム全体でコンテンツ作成を加速する必要がありました。A+のような高ボリュームの認定は特に課題を提起しました。各項目は、公平性、信頼性、法的防御性に関する厳格な心理測定基準を満たさなければなりませんでした。

  • 品質を維持するのは遅すぎる
  • 一般的なAIはIP所有権を制限する
  • SMEはよりコントロールを持つ必要がある

従来の開発モデルは追いつけませんでした。それは徹底していましたが、遅すぎました—CompTIAの進化するニーズには遅すぎたのです。チームは、SMEの関与、編集の厳格さ、完全なIP所有権を保持しながら、より迅速な出力を可能にするアプローチが必要でした。

Shutterstock 2325628103

「専門的なモデルは、そうしたものを排除するように訓練されているため、幻覚が発生しにくいです。良い情報だけを提供してくれます。」

Wendy Gavin

シニアプロダクトマネージャー, Finetune AI

戦略的パートナーシップ

CompTIAは、アイテム開発のために人工知能を活用するために、Finetune AIとの複数年にわたるコラボレーションを開始しました。彼らは共同で、Finetune Generate®ドメイン特化型AIモデルを作成しました。

ChatGPTやCopilotのような汎用ツールとは異なり、Finetune AIは、評価の専門家によって設計された米国唯一のカスタム特許AIモデルであり、幻覚を最小限に抑え、厳格な編集基準に沿っています。A+認証は、その構造化されたコンテンツと高いアイテムボリュームのためにパイロットとして機能しました。

このプロジェクトは、Finetune AIの専門家、CompTIAのコンテンツ開発チーム、そしてSMEを集めて、モデルを独自の青写真、スタイルガイド、および目標に基づいて訓練しました。AIはSMEの著作権を支援しましたが、決して置き換えることはなく、より迅速なドラフトと反復を可能にしました。

Finetune Generateによる革新

CompTIAは、スケールを考慮したハイブリッドワークフローにFinetune Generate®を組み込みました。このモデルはCompTIAの専有資料で訓練され、出力がトーン、構造、学習目標に一致するようにしています。SMEはAI生成のドラフトに対して、ほとんど修正を加えることはありませんでした。

CompTIAはAI支援コンテンツの完全な所有権を保持し、制御とセキュリティを維持しました。このツールはBloomのレベル2および3の目標で非常に優れたパフォーマンスを発揮しました—A+のようなエントリーレベルの認証で頻繁に見られます。

主な利点:

  • カスタムモデルトレーニング
  • 効率的なドラフト作成
  • 安全な知的財産
  • 低い認知レベルに最適

“私たちは、QC効率に明確な利点をもたらす方法でGenerateを使用しています。”

- Danielle Castelli, Director, Exam Development, CompTIA

A+試験バージョン1101および1102の心理測定レビューがこのアプローチを検証しました。SMEは1時間あたり5.7項目を作成し—3.3から増加し—ほとんどが最小限の編集を必要としました。心理測定ベンチマーク(難易度、識別力、信頼性)は期待される範囲内にとどまり、項目はフィールドテスト後にプレテストからスコアが付けられた状態に移行しました。

「[Prometric]と協力することで、私たちは試験開発プログラムを強化し、プロセスをより効率的にすることができました。その結果、私たちのテスト開発者とSMEの両方が恩恵を受けています。」

Danielle Castelli

ディレクター、試験開発, CompTIA

結果

今日、CompTIAは、構造化された低次の認知要求を持つ認証に対してFinetune Generate®を引き続き使用しています—スピードとスケーラビリティが重要です。このAI強化プロセスにより、SMEは初稿ではなく検証に集中できます。

  • 出力の増加
  • 編集効率
  • 統計的同等性
  • コンテンツの実行可能性

将来を見据えて、CompTIAは、焦点を絞った責任あるAIが認証ポートフォリオ全体で同様の価値を提供できる追加のユースケースを探求しています—常に品質と管理に重点を置いて。

ダウンロード成功事例