Pesquisa
Histórias de Sucesso / CompTIA Aproveita o Finetune AI

CompTIA utiliza a Finetune AI para escalar rapidamente sem sacrificar a qualidade

A CompTIA acelera o desenvolvimento de avaliações criando itens de teste de alta qualidade com a Finetune AI, ampliando seu programa de certificação global para atender às demandas do mercado de trabalho.

Shutterstock 2463474777

Contexto

A CompTIA é a principal fornecedora mundial de treinamentos e certificações de TI neutros a fornecedores. Em parceria com milhares de instituições, a CompTIA capacita os alunos com habilidades prontas para o mercado através de ferramentas de aprendizagem de primeira linha, credenciais respeitáveis e suporte abrangente para a carreira.

Para atender à crescente demanda global—particularmente para o seu exame A+—a CompTIA se associou à Prometric, aproveitando a Finetune AI para uma solução de IA personalizada. Esta parceria possibilitou um processo de criação de conteúdo mais rápido, mantendo a qualidade, rigor psicométrico e supervisão de especialistas—avançando a missão da CompTIA de oferecer credenciais eficientes e prontas para a carreira.

A Desafio

À medida que a demanda global aumentava, a CompTIA precisava acelerar a criação de conteúdo em 16 programas principais. Certificações de alto volume, como A+, apresentavam um desafio particular. Cada item precisava atender a rigorosos padrões psicométricos de equidade, confiabilidade e defensibilidade legal.

  • Manter a qualidade é muito lento
  • IA geral limita a propriedade intelectual
  • Os especialistas precisam ter mais controle

O modelo de desenvolvimento tradicional não conseguia acompanhar. Era minucioso, mas lento—muito lento para as necessidades em evolução da CompTIA. A equipe precisava de uma abordagem que preservasse o envolvimento dos especialistas, o rigor editorial e a plena propriedade intelectual, enquanto permitia uma produção mais rápida.

Shutterstock 2325628103

“Modelos especializados são muito menos propensos a alucinações porque foram treinados para eliminar isso, nos dando apenas o que é bom.”

Wendy Gavin

Gerente de Produto Sênior, Finetune AI

Parceria Estratégica

A CompTIA lançou uma colaboração de vários anos com a Finetune AI para aproveitar a inteligência artificial no desenvolvimento de itens. Juntas, elas criaram um modelo de IA específico de domínio Finetune Generate®.

Diferente de ferramentas de uso geral como ChatGPT ou Copilot, a Finetune AI é o único modelo de IA personalizado e patenteado nos EUA, projetado para e por profissionais de avaliação, minimizando alucinações e alinhando-se a rigorosos padrões editoriais. A certificação A+ serviu como piloto devido ao seu conteúdo estruturado e alto volume de itens.

O projeto reuniu especialistas da Finetune AI, equipes de desenvolvimento de conteúdo da CompTIA e SMEs para treinar o modelo em blueprints proprietários, guias de estilo e objetivos. A IA apoiou—mas nunca substituiu—o autorado de SMEs, capacitando um redigido e iteração mais rápidos.

Inovando com Finetune Generate

A CompTIA incorporou o Finetune Generate® em um fluxo de trabalho híbrido projetado para escalabilidade. O modelo foi treinado com materiais proprietários da CompTIA, garantindo que as saídas estivessem alinhadas com o tom, a estrutura e os objetivos de aprendizagem. Os SMEs frequentemente faziam poucas—se é que faziam—revisões nos rascunhos gerados pela IA.

A CompTIA manteve total propriedade do conteúdo assistido por IA, mantendo controle e segurança. A ferramenta teve um desempenho excepcional nos objetivos de Nível 2 e 3 de Bloom—frequentes em certificações de nível inicial como A+.

Principais Benefícios:

  • Treinamento de Modelo Personalizado
  • Redação Eficiente
  • Propriedade Intelectual Segura
  • Ideal para Níveis Cognitivos Inferiores

“Usamos o Generate de uma forma que resulta em claras vantagens na eficiência de QC.”

- Danielle Castelli, Diretora, Desenvolvimento de Exames, CompTIA

Uma revisão psicométrica das versões 1101 e 1102 do exame A+ validou a abordagem. Os SMEs produziram 5,7 itens por hora—um aumento em relação aos 3,3—com a maioria precisando de edições mínimas. Os parâmetros psicométricos (dificuldade, discriminação, confiabilidade) permaneceram dentro das faixas esperadas, e os itens moveram-se com sucesso do pré-teste para o status de pontuação após os testes de campo.

“Trabalhando com [Prometric], conseguimos aumentar nosso programa de desenvolvimento de exames para tornar o processo mais eficiente, de uma forma que tanto nossos desenvolvedores de testes quanto os especialistas em conteúdo se beneficiaram.”

Danielle Castelli

Director, Desenvolvimento de Exames, CompTIA

Resultado

Hoje, a CompTIA continua a usar o Finetune Generate® para certificações com demandas cognitivas estruturadas e de nível inferior—onde a velocidade e a escalabilidade são fundamentais. Este processo aprimorado por IA permite que os SMEs se concentrem na validação em vez de nos primeiros rascunhos.

  • Aumento da Produção
  • Eficiência Editorial
  • Equivalência Estatística
  • Viabilidade de Conteúdo

Olhando para o futuro, a CompTIA está explorando casos de uso adicionais onde a IA focada e responsável pode oferecer valor similar em seu portfólio de certificações—sempre com ênfase na qualidade e no controle.

História de Sucesso para Download