Povești de Succes/Texas Region 10 Transformă Educația cu AI Personalizat
Texas Region 10 Transformă Educația cu AI Personalizat
Examenul de evaluare a pregătirii academice de înaltă miza K-12 din Regiunea 10 a Statului Texas a necesitat îmbunătățiri ale conținutului, dar doar Prometric AI a putut să gestioneze rapid și eficient cele 90.000 de articole.
Context
Centrul de Servicii Educaționale (ESC) din Regiunea 10 din Texas joacă un rol esențial în promovarea succesului elevilor și în conturarea peisajului educațional din întreaga stat. Ca partener al altor douăzeci de ESC-uri, Regiunea 10 deservește 120 de districte școlare publice și charter, peste 3.000 de școli și mai mult de 900.000 de elevi din statul Texas. ESC-ul creează, distribuie și susține o bancă de articole, TEKSbank, care este utilizată de 600 de districte școlare și charter, peste 5.000 de școli și mai mult de 3 milioane de elevi. De la dezvoltarea curriculei și suportul instrucțional până la formarea leadership-ului și serviciile de educație specială, Regiunea 10 este dedicată împuternicirii educatorilor, îmbogățirii experiențelor de învățare și stimulării rezultatelor pozitive pentru elevii din toate mediile și abilitățile.
Provocarea
Regiunea 10 publică o bancă de itemi, TEKSbank, pentru districtele școlare pentru a ajuta la pregătirea elevilor pentru examenul cu miză mare, Evaluările Academice de Pregătire a Statului Texas (STAAR®). Cele 90,000 de întrebări de test din TEKSbank sunt aliniate la standardele curriculare ale statului, Cunoștințe și Abilități Esențiale din Texas, precum și alte etichete, cum ar fi Adâncimea Cunoștințelor a lui Webb (DOK) și Taxonomia lui Bloom.
Pe măsură ce tendințele educaționale se schimbă și statul își actualizează standardele, Regiunea 10 depune mult efort pentru a se asigura că banca este aliniată și relevantă.
Pentru a se asigura că conținutul este aliniat cu standardele curriculare ale statului și conține diverse niveluri de dificultate, Regiunea 10 desfășoară mai multe proiecte de aliniere pe an. Se angajează contractori pentru a analiza fiecare item manual. Unele proiecte necesită un expert în curriculum pentru fiecare dintre cele 12 niveluri de clasă pentru a revizui până la 2,000 de itemi. Nu numai că aceste procese de revizuire sunt consumatoare de timp, dar procesul de revizuire manuală a dus la o lipsă de acuratețe și consistență între itemii actualizați.
Regiunea 10 cheltuia o sumă semnificativă de timp și resurse pentru a menține alinierea conținutului, având puțin timp pentru a prioritiza creșterea și îmbunătățirea conținutului. Nu era neobișnuit să se cheltuie 150,000 de dolari anual doar pentru a actualiza standardele sau etichetele pe conținutul existent. Acest lucru a devenit și mai important în 2023, când peisajul educațional din Texas a suferit o transformare semnificativă cu introducerea itemilor îmbunătățiți prin tehnologie (TEI) și evaluarea online. Aceasta a fost o abatare de la metodele tradiționale de evaluare și a provocat educatorii să pregătească elevii pentru un nou paradigm care punea accent pe gândirea critică și o demonstrație sofisticată a cunoștințelor. Pentru a sprijini profesorii și a-i conduce în această nouă frontieră, Regiunea 10 s-a confruntat cu provocarea de a crea 20,000 de TEI-uri de înaltă calitate.
“Finetune a avut o înțelegere foarte bună a conținutului K-12 și a standardelor. A fost ușor să purtăm discuții cu ei despre ceea ce ne doream, chiar dacă nu aveam cunoștințe tehnice despre AI pentru a descrie acest lucru.”
Jim Newhouse
Fost Director Asistent al Soluțiilor de Date din Regiunea 10
Strategia de Parteneriat
Regiunea 10 a conturat inițial patru obiective principale pe care încercau să le atingă prin găsirea unui nou partener.
Asigurarea aliniamentului la cele mai recente standarde de stat
Identificarea lacunelor de cunoștințe
Asignarea adâncimii cunoștințelor (DOK) Actualizarea conținutului cu relevanță culturală
“Considerăm că AI este un instrument care este programat de oameni, supravegheat de oameni și analizat de oameni.”
- Jim Newhouse, Fost Director Asistent al Soluțiilor de Date din Regiunea 10
ESC a avut de asemenea nevoie să ia în considerare mai mulți factori importanți înainte de a începe implementarea noii tehnologii pentru a eficientiza practicile:
O necesitate de a menține supravegherea umană pe parcursul procesului
Ajustarea constantă și perfecționarea conținutului
Reducerea timpului proiectelor de aliniere pentru a permite mai mult timp pentru îmbunătățirea și dezvoltarea mai multor întrebări
Regiunea 10 s-a conectat cu echipa Finetune de la Prometric în martie 2023. Finetune a înțeles rapid provocările ESC și a început lucrările pentru a implementa Finetune Catalog™, un instrument hibrid AI-uman pentru alinierea conținutului cu perspective în profunzime în întreaga bancă de articole și materiale de învățare.
„Implementarea Catalog a durat doar câteva săptămâni în loc de cele șase luni estimate și a redus numărul de contractori necesari de la zece la doar trei. Utilizarea Finetune Catalog pentru a realiza sarcinile de aliniere a eliberat timp și bani și a crescut productivitatea generală.”
Jim Newhouse
Fost Director Asistent de Soluții de Date pentru Regiunea 10
Rezultatul
Regiunea 10 a furnizat Finetune materiale de învățare, cum ar fi planuri de examen, standarde, bănci de itemi și altele. Finetune a preluat acest conținut și a construit un model personalizat Catalog AI care ar lucra pentru a analiza conținutul lor și a vedea cât de bine se aliniază cu adâncimea cunoștințelor lui Webb. După prima aliniere, Catalog a raportat o rată de acuratețe de 96%, lăsând echipa Regiunii 10 entuziasmată și optimistă pentru dezvoltarea și îmbunătățirea viitoare a conținutului lor. Acele „ace în fân” care necesitau îmbunătățiri de aliniere erau reparabile, și ei ar putea să o facă mai repede, mai ieftin și mai precis ca niciodată.
Împreună cu acuratețea primei aliniere, ESC a primit o raționare care ar fi utilă în construirea viitoarelor evaluări. Raționarea complexă a devenit o nouă colecție transformatoare de date pe care sunt capabili să o furnizeze constructorilor de teste și profesorilor prin intermediul platformei de evaluare.
Acum, cu economii de aproximativ 100.000 de dolari pe fiecare domeniu de conținut de bază, inclusiv matematică, arte ale limbii engleze și citire (ELAR), știință și studii sociale, Regiunea 10 poate reinvesti în producerea de conținut nou pentru a crește banca de itemi actuală. TEKSbank este acum echipat cu 25% (20.000) întrebări de ultimă generație, îmbunătățite tehnologic, care oferă o evaluare mai profundă a cunoștințelor și o evaluare mai precisă a abilităților elevilor.