Búsqueda
Historias de Éxito / CompTIA aprovecha Finetune AI

CompTIA aprovecha Finetune AI para escalar rápidamente sin sacrificar la calidad.

CompTIA acelera el desarrollo de evaluaciones creando elementos de prueba de alta calidad con Finetune AI, escalando su programa de certificación global para satisfacer las demandas de la fuerza laboral.

Shutterstock 2463474777

Antecedentes

CompTIA es el proveedor líder mundial de formación y certificaciones de TI neutrales ante proveedores. Al asociarse con miles de instituciones, CompTIA equipa a los estudiantes con habilidades listas para el empleo a través de herramientas de aprendizaje de primer nivel, credenciales respetadas y un apoyo integral para la carrera.

Para satisfacer la creciente demanda global—particularmente para su examen A+—CompTIA se asoció con Prometric, aprovechando Finetune AI para una solución de IA personalizada. Esta asociación permitió un proceso de creación de contenido más rápido mientras se mantenía la calidad, el rigor psicométrico y la supervisión experta—avanzando la misión de CompTIA de ofrecer credenciales eficientes y listas para la carrera.

La Desafío

A medida que la demanda global aumentaba, CompTIA necesitaba acelerar la creación de contenido en 16 programas centrales. Certificaciones de alto volumen como A+ presentaban un desafío particular. Cada elemento debía cumplir con rigurosos estándares psicométricos de equidad, fiabilidad y defensa legal.

  • Mantener la calidad es demasiado lento
  • La IA general limita la propiedad intelectual
  • Los expertos deben tener más control

El modelo de desarrollo tradicional no podía mantenerse al día. Era exhaustivo pero lento, demasiado lento para las necesidades en evolución de CompTIA. El equipo necesitaba un enfoque que preservara la participación de los expertos, el rigor editorial y la plena propiedad intelectual, al tiempo que permitiera una producción más rápida.

Shutterstock 2325628103

“Los modelos especializados son mucho menos propensos a alucinaciones porque han sido entrenados para eliminar eso, darnos solo lo bueno.”

Wendy Gavin

Senior Product Manager, Finetune AI

Asociación Estratégica

CompTIA lanzó una colaboración de varios años con Finetune AI para aprovechar la inteligencia artificial en el desarrollo de ítems. Juntos, crearon un modelo de IA específico de dominio Finetune Generate®.

A diferencia de herramientas de propósito general como ChatGPT o Copilot, Finetune AI es el único modelo de IA personalizado y patentado en los EE.UU. diseñado para y por profesionales de evaluación, minimizando alucinaciones y alineándose con estrictos estándares editoriales. La certificación A+ sirvió como piloto debido a su contenido estructurado y alto volumen de ítems.

El proyecto reunió a expertos de Finetune AI, equipos de desarrollo de contenido de CompTIA y expertos en la materia (SMEs) para entrenar el modelo en planos, guías de estilo y objetivos propietarios. La IA apoyó, pero nunca reemplazó, la autoría de los SMEs, empoderando un borrador y una iteración más rápidos.

Innovando con Finetune Generate

CompTIA incorporó Finetune Generate® en un flujo de trabajo híbrido diseñado para escalar. El modelo fue entrenado con materiales propios de CompTIA, asegurando que las salidas estuvieran alineadas con el tono, la estructura y los objetivos de aprendizaje. Los expertos a menudo realizaron pocas—si es que hubo—revisiones a los borradores generados por la IA.

CompTIA retuvo la propiedad total del contenido asistido por IA, manteniendo el control y la seguridad. La herramienta funcionó excepcionalmente bien en los objetivos de Nivel 2 y 3 de Bloom—frecuentes en certificaciones de nivel básico como A+.

Beneficios Clave:

  • Entrenamiento de Modelo Personalizado
  • Borrado Eficiente
  • Propiedad Intelectual Segura
  • Ideal para Niveles Cognitivos Más Bajos

“Usamos Generate de una manera que resulta en claras ventajas en la eficiencia de QC.”

- Danielle Castelli, Directora, Desarrollo de Exámenes, CompTIA

Una revisión psicométrica de las versiones 1101 y 1102 del examen A+ validó el enfoque. Los expertos produjeron 5.7 ítems por hora—un aumento desde 3.3—con la mayoría necesitando ediciones mínimas. Los puntos de referencia psicométricos (dificultad, discriminación, confiabilidad) se mantuvieron dentro de los rangos esperados, y los ítems se movieron exitosamente de estado de prueba previa a estado puntuado después de la prueba de campo.

“Trabajando con [Prometric], hemos podido aumentar nuestro programa de desarrollo de exámenes para hacer el proceso más eficiente de una manera que tanto nuestros desarrolladores de pruebas como los expertos en la materia se han beneficiado.”

Danielle Castelli

Director, Desarrollo de Exámenes, CompTIA

Resultado

Hoy, CompTIA continúa utilizando Finetune Generate® para certificaciones con demandas cognitivas estructuradas y de nivel inferior—donde la velocidad y la escalabilidad son clave. Este proceso mejorado por IA permite a los expertos en la materia concentrarse en la validación en lugar de en los primeros borradores.

  • Aumento de la Producción
  • Eficiencia Editorial
  • Equivalencia Estadística
  • Viabilidad del Contenido

Mirando hacia el futuro, CompTIA está explorando casos de uso adicionales donde una IA enfocada y responsable puede ofrecer un valor similar en su cartera de certificaciones—siempre con un énfasis en la calidad y el control.

Descargar Historia de Éxito