В Українському центрі оцінювання якості освіти (УЦОЯО) наразі не використовують тестові завдання НМТ, розроблені штучним інтелектом, але його планують навчити перевіряти деякі відповіді у майбутньому. Про це розповіла директорка Центру Тетяна Вакуленко на YouTube-каналі «НУШ».
Нині за розробку тестових завдань відповідальні конкретні автори. І хоча їхні роботи проходять сувору багаторівневу перевірку, це — не гарантія бездоганної якості. Зате дозволяє Центру вести облік результативності:
«Ми рахуємо статистику, скільки прийшло завдань, скільки не отримало позитивних рецензій, скільки пішли на апробацію і мають погану статистику. Ми розуміємо, як пише той чи інший автор. Зі штучним інтелектом це буде складніше», — пояснює Тетяна Вакуленко.
Створення одного якісного завдання — це дорогий і складний процес, що включає написання, експертну оцінку, тестування, статистичну перевірку й технічне впровадження.
Дехто з авторів уже пробує використовувати ШІ – зокрема, щоб дати йому завдання на виконання, як учаснику. Але про масове впровадження технології наразі не йдеться.
«Зараз ми обережно оптимістичні (…) Ми потроху щось використовуємо, але для того, щоб на масовому оцінюванні його використовувати – точно рано», – зазначає очільниця УЦОЯО.
Водночас в УЦОЯО розглядають можливість використання ШІ в майбутньому, наприклад, у ролі третього екзаменатора на тестах з відкритими відповідями.
«Ми думаємо про те, що коли повернемося до більш класичного варіанту тестування, тобто до моделі з відкритими відповідями, [можна буде] принаймні на рівні експерименту [зробити] третім екзаменатором штучний інтелект, щоб натренувати модель», – каже Тетяна.
Оцінки двох екзаменаторів визначатимуть успішність вступника і враховуватимуться як частина сумарного бала, а штучний інтелект допоможе фахівцям оцінити, наскільки суголосний він з людьми.
За її словами, база з 28-300 тисяч відповідей учасників має хороший потенціал для тренування таких моделей.
Крім того, розробники УЦОЯО вже працюють над модулями для платформи «Українська школа онлайн», які перевірятимуться штучним інтелектом.
«Зрозуміло, що там принаймні на перших етапах буде приписка: "Перевірено штучним інтелектом, може відрізнятися від результату, який запропонувала людина"», – зауважує директорка УЦОЯО.
{{read_more|Читайте також| 7001, 6993}}
Джерело фото Depositphotos
Приєднуйтесь до нашої сторінки і групи у Фейсбуці, спільнот у Viber та Telegram