Класифікація передтестова завдань. Відповідно до найбільш часто зустрічається у вітчизняній і зарубіжній літературі класифікацією передтестова завдань виділяють:
завдання з вибором, в яких учні вибирають правильну відповідь з даного набору відповідей;
завдання з конструйованим відповіддю, що вимагають при виконанні від учня самостійного отримання відповідей;
завдання на встановлення відповідності, виконання яких пов'язане з виявленням відповідності між елементами двох множин;
завдання на встановлення правильної послідовності, в яких від учня потрібно вказати порядок елементів, дій або процесів, перерахованих педагогом [4].
Названі чотири форми тестових завдань є основними і найбільш поширеними. Часто специфіка змісту контрольованого предмета вимагає використання нових форм, більш адекватних цілям розробки тестів. Зазвичай такі інновації будуються на основі поєднання окремих елементів основних форм.
Загальні вимоги до передтестовим завданням і процедур їх застосування. Незалежно від форми передтестова завдання повинні відповідати таким загальним вимогам:
кожне передтестове завдання має свій порядковий номер, який може змінюватися після статистичної оцінки складності завдання і вибору стратегії пред'явлення завдань тесту;
кожне передтестове завдання має еталон правильної відповіді (еталон оцінювання для завдань з вільно конструйованим відповіддю);
в передтестова завданні всі елементи розташовуються на чітко визначених місцях, фіксованих в рамках обраної форми;
-для передтестова завдань розробляється стандартна інструкція по виконанню, яка не змінюється в рамках кожної форми і випереджає формулювання завдань у тесті;
- для кожного завдання розробляється правило виставлення дихотомічної або політоміческой оцінки, загальне для всіх завдань однієї форми і супроводжується інструкцією по перевірці та підрахунку сирих (первинних) балів по тесту.
Процес тестових вимірювань гранично стандартизується, якщо:
жодному учневі не дається ніяких переваг перед іншими;
заздалегідь розроблена система підрахунку балів застосовується до всіх відповідей учнів без винятку;
в тест включені завдання однієї форми або різних форм з оптимальними ваговими коефіцієнтами, значення яких отримані статистичним шляхом;
тестування різних груп випробовуваних проводиться в однаковий час, в подібних умовах;
група тестованих вирівняна по мотивації;
- всі випробовувані виконують одні й ті ж завдання.
Передтестова завдання з вибором однієї або кількох правильних відповідей
Основні елементи передтестова завдань з вибором відповідей.
У передтестова завданнях з вибором (закритих завданнях) можна виділити основну частину, яка містить постановку проблеми, і готові відповіді, сформульовані викладачем. Серед відповідей правильним найчастіше буває лише один, хоча не виключаються й інші варіанти з вибором кількох правильних (в тому числі і в різному ступені) відповідей.
Неправильні, але правдоподібні відповіді називаються дистракторами [4]. Якщо в завданні дві відповіді, один з яких є дістрактора, то ймовірність випадкового вибору пра-вильного відповіді шляхом вгадування дорівнює 50%. Число дістракторов підбирається таким чином, щоб завдання не було занадто громіздким. Разом з тим намагаються не допустити занадто велику ймовірність вгадування правильної відповіді. Тому найчастіше в завданнях буває три або чотири дістрактора і одну правильну відповідь.
Завдання з двома і трьома відповідями зазвичай використовують для експрес-діагностики, наприклад, в автоматизованих контрольно-навчальних програмах для входу в навчальний модуль при адаптивному тестуванні або для самоконтролю, коли випробуваному необхідно оперативно виявити прогалини у власних знаннях. Однак через високу ймовірність вгадування завдання з двома об'єктами не включають в підсумкові тести.
Недоліки передтестова завдань з вибором відповідей. До числа недоліків завдань з вибором слід віднести ефект вгадування, характерний для слабопідготовлених учнів при відповідях на найбільш важкі завдання тесту. Хоча можливість вгадування справді є, тестологи за допомогою різних ме-тодов навчилися уникати подібних ситуацій. Для цього вводяться спеціальні інструкції, що орієнтують випробовуваних на пропуск незнайомого завдання замість відповіді шляхом здогадки. При підрахунку балів слабких учнів, отриманих за найбільш важким завданням тесту, додаються спеціальні вагові коефіцієнтом-ти, близькі до нуля, або збільшується число завдань тесту. Іноді застосовується спеціальна формула для корекції індивідуальних балів з поправкою на здогад.
Складнощі виникають при використанні завдань з вибором для перевірки умінь продуктивного рівня, пов'язаних із застосуванням знань учнями в незнайомій ситуації, творчими аспектами підготовки, а також у випадках, коли потрібно перетворення умов поставленої пе-ред учням завдання. У таких ситуаціях завдання з вибором готових відповідей використовувати найчастіше неможливо. В умовах же масового атестаційного тестування, коли необхідно залучити ефективні комп'ютеризовані технології для підрахунку балів учнів і отримати високу об'єктивність результатів педагогічного вимірювання, гідності завдань з вибором явно переважують недоліки. Тому ця форма нерідко домінує при розробці підсумкових тестів.
Приклади передтестова завдань з двома і трьома відповідями. У завданнях з двома відповідями найпростіше підбирати дістрактори за допомогою заперечення того, що є вірним. Не рекомендується використовувати замість дістракторов слова «так», «ні», оскільки в іншому випадку буде досить важко сформулювати твердження, на які можна дати однозначну відповідь.
Завдання з трьома відповідями зазвичай використовують в експрес-діагностиці в тих випадках, коли в силу специфіки змісту недостатньо двох відповідей. Іноді вони з'являються внаслідок видалення «непрацюючих» дістракторов. В цілому такі завдання невдалі, оскільки вони недостатньо короткі і в них висока ймовірність вгадування правильної відповіді. наприклад:
Імпульс, що надходить по блукає нерву
прискорює роботу серця
уповільнює роботу серця
не впливає на діяльність серця.
Передтестова завдання з чотирма і п'ятьма відповідями. У більшості тестів зустрічаються завдання з чотирма - п'ятьма відповідями, з яких один вірний. При вмілій розробці вони можуть бути досить короткими, і в них невисока вірогідність вгадування правильної відповіді (0,25 при чотирьох відповідях і 0,20 при п'яти). наприклад:
Кадети вважали головним методом вирішення основних проблем Росії
революційне повстання мас
тактику тиску на уряд через представницькі органи, парламент
загальний політичний страйк.
Найбільш вдалими можна вважати завдання, виконання яких крім традиційного довгого шляху передбачає можливість досить швидкого (3 - 4 с) відповіді. Зрозуміло, швидке рішення під силу тільки учню з чіткою структурою знань і твердими навичками по перевіряється розділу. Слабко підготовлені учні підуть традиційним шляхом і витратять на завдання не 3 - 4 с, а покладені 1 - 2 хв.
Фасетного завдання в тесті. Навіть в умовах добре організованого процесу тестування при наявності єдиного варіанта тесту велика ймовірність списування, підказок і інших небажаних моментів. Тому зазвичай розробляють 5 --8 паралельних варіантів тесту, для яких можна використовувати фасетного завдання. Під фасетів розуміється форма, що забезпечує подання декількох варіантів одного і того ж елемента змісту тесту [4].
Кожен випробовуваний отримує з фасета тільки один варіант завдання. При цьому всі випробовувані групи виконують однотипні завдання, але з різними елементами фасета і, відповідно, з різними відповідями. Таким чином, вирішуються одночасно два завдання: усувається можливість списування і забезпечується паралельність варіантів тестів, пропонованих різними учням. У наведеному далі прикладі містяться два завдання, один з яких призначений для вибору архітектурних комплексів околиць Москви, а інше - Санкт-Петербурга:
До палацовим комплексам околицях Москви, Санкт-Петербурга
Царське село, Стрельні.
Передтестова завдання з вибором кількох правильних відповідей. Завдання з кількома правильними відповідями зазвичай намагаються не включати в підсумкові тести, результати яких використовуються для адміністративно-управлінських рішень в освіті. Поява частково правильних відповідей учнів, що виникають при виборі не всіх запланованих вірних відповідей, призводить до зниження об'єктивності і порівнянності оцінок, одержуваних учнями по тесту.
У поточному контролі такі завдання, навпаки, бажані, оскільки учень повинен не тільки знайти правильні відповіді, але і сам визначити їх число, що значно урізноманітнює і ускладнює завдання.
Передтестова завдання на вибір неправильної відповіді. Орієнтація учнів на вибір неправильної відповіді часто викликає негативну реакцію у багатьох педагогів. Особливо недоречні завдання на вибір неправильної відповіді в тестах з української мови або з історії. Неприпустимо, наприклад, коли завдання націлює учня на неправильне написання слів або на невірну оцінку історичних подій. Однак якщо потрібно перевірити знання учнем певних правил з техніки безпеки, наприклад під час проведення хімічних дослідів, то вибір не-правильної відповіді стає просто знахідкою.
У разі коли велика частина завдань у тесті орієнтована на вибір правильної відповіді, завдань з протилежного інструкцією в тесті має бути не більше двох-трьох.
Оцінка результатів виконання завдань, первинний, або сирої, бал. При підрахунку результатів виконання завдань з вибором однієї правильної відповіді зазвичай вважають за краще дихотомічне оцінку. За правильне виконання завдання випробуваний отримує «1», а за неправильну відповідь або пропуск - «О». Підсумовування всіх одиниць дозволяє обчислити індивідуальний (первинний, або сирої) бал випробуваного, який в разі дихотомічної оцінки дорівнює кількості правильно виконаних завдань у тесті.
Якщо правильну відповідь не один, то найчастіше використовується полігаміческая оцінка, яка пропорційна числу правильно обраних відповідей.
Корекція на здогад первинних тестових балів. Через ефект вгадування відповідей в завданнях з вибором сирі бали намагаються скоригувати шляхом введення поправки на здогад. Формула корекції балів, отриманих в результаті виконання завдань з k-відповідями, з яких тільки один вірний, має такий вигляд:
Де i-- номер будь-якого випробуваного групи;
X - скоригований бал i-го випробуваного;
W - число невиконаних (неправильно виконаних, пропущених, недосягнутого) завдань тесту, а Х1 + W = N, де N - число завдань у тесті.
Якщо в завданнях тільки один дистрактор і один пошук правильної відповіді то k - 1 = 1, тому корекція балів здійснюється досить просто. Для кожного випробуваного обчислюється різниця між числом правильно виконаних і невиконаних їм завдань тесту. Наприклад, якщо в тесті з 60 завдань випробуваний виконав правильно 50, а неправильно - 10, то скоригований бал буде дорівнює 50 - 10 = 40. Для більш слабкого учня, який виконав правильно всього 30 завдань з 60, бал після корекції стане дорівнює 30 - 30 = 0. Таким чином, бал сильного учня зменшився в результаті корекції досить незначно, всього на 10 одиниць. Інша працювати з балом учня, який виконав правильно всього половину завдань тесту. Після корекції він отримає 0 балів, так як в половині завдань з двома відповідями він цілком міг вгадати правильну відповідь.
Формула корекції має певні недоліки, які знижують точність тестових вимірювань. Це пов'язано з тим, що в основу її побудови покладено ряд штучних припущень, часто не узгоджуються з реальною процедурою виконання тесту. Зокрема далеко не в повній мірі виконується припущення про те, що всі неправильні відповіді є наслідком випадкового вгадування. Настільки ж умовно інше припущення про однакову ймовірності вибору кожної відповіді завдання тесту.