Король, Олена Миколаївна, та Олександр Миколайович Алексєєв. "Спеціалізація тестового контролю за критерієм значущості навчального матеріалу". Theory and methods of e-learning 3 (10 лютого 2014): 124–30. http://dx.doi.org/10.55056/e-learn.v3i1.328.
Анотація:
Постановка проблеми. На сьогоднішній день викладачі ВНЗ активно використовують комп’ютеризований контроль знань студентів перш за все для спеціальностей, які передбачають роботу на ПК. Однак, не завжди обрані викладачами програми повністю відповідають вимогам якісного персоналізованого контролю знань, тому що в них не закладено врахування критеріїв якості, а саме одного з них – значущості навчального матеріалу, який підлягає контролю.Невирішені частини проблеми. За наявності різнопрофільних груп на одному потоці студентів потрібно, щоб під час перевірки знань викладач використовував завдання для перевірки важливих – значущих знань саме для студента конкретної спеціалізації. Відсутність цього може призвести до недостатньої об’єктивності перевірки знань студентів і до неякісної підготовки спеціалістів одного з профілів.Аналіз актуальних досліджень. Проблеми тестового контролю, якість тестових завдань, у тому числі використання критерію значущості тестових завдань, розглядали в своїх працях такі науковці: О. М. Майоров, В. В. Семенець, Г. О. Мірських, І. А. Морєв, І. В. Куцевич, М. Б. Челишкова, М. Ф. Бондаренко, Н. Ф. Єфремова, Ю. Ф. Зіньковський та інші.Однак питання, пов’язані з розподілом значущості завдань за спеціалізаціями одного напрямку студентів не знайшли в них вичерпного вирішення.Викладачі у більшості випадків не завантажують себе добором завдань із загальнопрофільних дисциплін для студентів одного потоку, але різнопрофільних спеціальностей, і дають їм завдання, не розподілені за значущістю відповідного профілю (в тому числі і в тестовій формі) для перевірки якості їх знань.Метою статті є вдосконалення методики перевірки якості знань студентів напрямів підготовки «Початкова освіта. Інформатика», «Початкова освіта. Англійська мова» і «Дошкільна оcвіта» шляхом спеціалізації тестового контролю знань за рахунок одного із критеріїв якості контрою – значущості контрольованого матеріалу в сегменті дисциплін математичного циклу.Основний матеріал. На сьогодні, у силу демографічної ситуації, яка склалася у країні, і як наслідок проблеми набору студентів, Інститут педагогіки і психології СумДПУ не повністю покриває свої можливості по ліцензіях із деяких спеціальностей, але в той же час має не поганий показник на фоні інших структурних підрозділів у силу своєї гуманітарної спрямованості. Студентів зводять у потоки; при цьому деякі групи студентів мають загальні дисципліни, по яким, на нашу думку, треба б було здійснювати спеціалізоване надання матеріалу, що і виконується на практичних заняттях із зазначених спеціальностей. Тому доречним було б запропонувати спеціалізовану перевірку знань, а саме, тестовий контроль відносно обраного профілю.Щоб виконати якісну і спеціалізовану перевірку контрольованого матеріалу, викладач повинен підготувати такі завдання, які б дали змогу встановити якість набутих знань у межах програмної тематики, а також надати можливість студентам оволодіти максимальним об’ємом знань відповідно обраного ними профілю.Відповідно до цього, для студентів спеціальностей «Початкова освіта. Інформатика», «Початкова освіта. Англійська мова» і «Дошкільна освіта» проводилося дослідне тестування з використанням програмного комплексу SSUQuestionnaire (http://www.test.sumdu.edu.ua), теоретичною основою якого є імітаційна модель тестування [2], що надає можливість отримати результати контролю, зіставлені за критерієм значущості.Підготовчий етап контролю починався з аналізу робочих програм зазначених спеціальностей у сегменті дисциплін математичного циклу, які надаються студентам в однаковому об’ємі, тому мають однакову кількість годин.У ході аналізу, виходячи з цілей навчання, конкретизувалися програмні вимоги спеціальностей. Для включення в базу тестів відбиралися завдання, які б відповідали задачам навчання дисципліни в цілому і змісту окремих модулів і тем, але з поправкою на профіль навчання. При цьому розробник, обираючи прототип тестового завдання, мав визначити значущість завдань – міру необхідності, актуальності включення їх у тест для перевірки ключових знань із конкретної дисципліни, повноту відображення в тестовому матеріалі її змісту. Тобто при попередньому відборі прототипів тестових завдань викладач (навіть апріорі) керувався значущістю цього матеріалу в темі, розділі чи дисципліні в цілому, його приналежністю до основних або додаткових тем дисципліни кожної спеціальності окремо.Значущість навчального матеріалу є одним з основних критеріїв, що визначає результативність оцінювання якості навчання і однією з найважливіших характеристик, обов’язкових для врахування у процесі тестування. Достовірність установленого рівня значущості для окремих спеціальностей одного напрямку навчання, в значній мірі, залежить від необхідності створення банків тестових завдань, які можуть включати одні і ті ж питання, але при цьому знаходити різне відображення в окремих групах студентів, тобто від правильного встановлення рівнів нерівнозначності прототипів тестових завдань.Саме тому всі передбачені програмою теми були поділені на загально значущі і спеціалізовано значущі відповідно зазначеним спеціальностям. Перші враховували загальну значущість для студентів всіх спеціальностей, інші – спеціалізовану значущість окремо для кожної спеціальності.Відмітимо, що у процесі навчання усі теми давалися з однаковою значущістю, а диференціація матеріалу відбувалася за рахунок практики, коли на одні й ті ж самі теми на практичних заняттях виконувалась різна кількість завдань і варіювались завдання самостійної роботи.Це, безперечно, накладало додатковий тягар на роботу викладача, але привело до спеціалізованого оволодіння знаннями з контрольованої дисципліни студентами зазначених спеціальностей.Під час створення прототипів тестових завдань визначалася значущість тем контрольованої дисципліни. При цьому встановлювалася відносна значущість відображеного в завданні елементу теми, модуля, дисципліни, яка пропорційна відносній кількості праці, витраченій студентом на виконання цього тестового завдання. На етапі експертного аналізу дисципліни думка групи експертів указувала на значущість змісту теми, що рецензується, по відношенню до інших тем дисципліни відносно профілю спеціалізації. Відповідно до цього аналізувалися не окремі тестові завдання кожної теми, а завдання усіх тем дисципліни в цілому, і причому через призму кожної спеціальності окремо.Тобто при однакових темах в зазначених групах добирались завдання спеціалізованої значущості для кожної групи окремо, але так, щоб для контрольованої групи вони мали спеціалізоване значення, а для інших – були загально значущими, і розглядали їх у сукупності з іншими спеціальностями цього напрямку навчання. Тому сукупність тестових завдань набула вигляду узагальненої, і в ній віддзеркалилися всі теми, зазначені програмою через призму спеціалізованої значущості кожної групи студентів.Наступним етапом було встановлення рівнів значущості завдяки узагальненню думки групи експертів і прийняттю її як кількісної міри значущості – індексів значущості [1].За результатами створення прототипів тестових завдань формувалась узагальнена база із їх надлишковою кількістю, яка після експертного оцінювання набула вигляду спеціалізованої для підготовки студентів кожної спеціалізації. На її основі було сформовано різні тести для дисциплін одного напряму підготовки, але різної спеціалізації. При цьому завдання добирались із урахуванням цілей конкретної дисципліни – кожен набір завдань виражав значущість контрольованої спеціальності. Для об’єктивності і спеціалізації процесу перевірки знань було досягнуто зіставлення цих наборів за значущістю, тобто, щоб числові значення окремих тестів урівноважувалися один з одним.У сформованих тестах критерієм значущості виступали індекси значущості і кількість тестових завдань у них, причому у кожному випадку своя, відповідно значущим темам кожної спеціальності.Прикладом спеціалізовано значущої теми для студентів спеціальностей «Початкова освіта. Англійська мова» і «Початкова освіта. Інформатика» стала тема «Цифрові аудіовізуальні технічні засоби», завданнями якої були – запис звуку (вимови) за допомогою програми-утиліту Windows «Запис звуку» та спеціалізованої програми «Camtаsia Studio». Ця програма для перших дасть змогу перевірити набуті навички і застосовувати її в подальшій професійній діяльності під час мовлення (зможуть відточувати вимову з англійської мови) та аудіювання (прослуховувати власну вимову, корегувати її і виправляти власні помилки), а для других – стати стартовим етапом більш поглибленого вивчення спеціалізованих і вбудованих програм на наступним спецкурсах.Що ж стосується студентів спеціальності «Дошкільне навчання», то завдання цієї теми теж будуть мати індекс значущості, але їх кількість буде мінімальною.Тема «Налаштування і робота електронної дошки», а саме завдання на розгляд програмного забезпечення elitePanaboard для роботи з електронною дошкою для студентів спеціальності «Початкова освіта. Інформатика» мають спеціалізовано значущі індекси, а для студентів спеціальностей «Початкова освіта. Англійська мова» і «Дошкільна освіта» матимуть загально значущі, тому і при формуванні тесту, кількість завдань цієї теми для студентів спеціальності «Початкове навчання. Інформатика» буде більшою, а для двох інших – зведеною до мінімуму.При формуванні тестів з узагальненої бази тестових завдань для зіставлення їх за значущістю тем для групи «Початкова освіта. Інформатика» включаються саме ті завдання, які при експертному оцінюванні набули індекси спеціалізовано значущості з важливих тем цієї спеціальності, також можуть увійти і загальнозначущі завдання, але кількість перших буде переважно більшою для відображення повноти перевірки всього матеріалу дисципліни через призму контрольованої спеціальності. У свою чергу в тест для групи «Початкова освіта. Англійська мова» можуть увійти такі самі завдання, що й для попередньої групи, але вони будуть мати інший індекс значущості. В іншому випадку програмою може бути запропоновано іншу кількість завдань, а завдання загально значущі увійдуть із тією ж кількістю, але так, щоб відбулося зіставлення результатів за критерієм значущості, або кількість завдань може і не змінитися, але завдання увійдуть з іншою значимістю, за рахунок більшої складності кожного завдання. Відповідно теж саме відбувається і по групі «Дошкільна освіта».Розглянемо приклад застосування наведеної методики контролю знань студентів зазначених спеціальностей.Згідно робочої програми дисципліни «Технічні засоби навчання і обчислювальна техніка» кількість годин для зазначених спеціальностей складає 54 години, з них: 36 аудиторних та 18 годин самостійної роботи (що при розподілі за модулями складає: 1 модуль – 6 год., 2 модуль – 27 год., 3 модуль – 21 год.).Наведемо приклад спеціалізації тестового контролю за значущістю для 3-х спеціальностей «Початкова освіта. Інформатика», «Початкова освіта. Англійська мова», «Дошкільна освіта» для трьох модулів відповідної дисципліни (таблиця 1).Таблиця 1Розподіл кількості годин за критерієм значимості Аудиторнігодини ДисципліниМодуль 1 Модуль 2 Модуль 3 ВсьогоАуд.С/рТ1Т2Т36Т4Т5Т618Т7Т8Т9123618ПО (І)13266+*6+*63244+*4+*1654ПО (А)1326666+*2744+*4+*2154ДО1326666+*244+*4+*42454Значущість ЗЗСЗСЗ54* = кількість годин самостійної роботи, для кожної теми свояПО (І) – спеціальність "Початкова освіта. Інформатика"ПО (А) – спеціальність "Початкова освіта. Англійська мова"ДО – спеціальність "Дошкільна освіта"Т1…Т9 – теми контрольованої дисципліни згідно робочої програмиЗЗ – загально значущі темиСЗ – спеціалізовано значущі темиС/р – самостійна роботаУ першому модулі завдання для всіх трьох зазначених спеціальностей є загально значущими. Теми ж наступних модулів будуть спеціалізовані за значущістю відповідно профілю навчання.Формування тестів відбувається з використанням загальної бази тестових завдань, у яку включені 90 завдань з дев’яти тем, вивчення яких передбачено навчальними планами спеціальностей (таблиця 2).Таблиці 2Розподіл вагових коефіцієнтів питань Вагові коефіцієнти питаньТеми Завдання