|
задания теста полностью охватывают и при том в нужной пропорции все основные аспекты той области знания, подготовленность в которой этот тест оценивает. После составления тестов оценка валидности по ♦ содержанию проводилась на заседаниях предметно-методической комиссии, состоящей из опытных педагогов вуза. Валидность по уровню (критерию) является показателем того, что уровень подготовки обучаемых сопоставим с уровнем трудности теста. Оценка валидности по уровню производилась сравниванием результатов тестирования экспериментальных групп и результатов оценивания этой же группы стандартными методами. Надежность теоретически отражает идею точности измерения «» заданиями теста, представляющими только часть из генеральной совокупности всех возможных заданий. В практическом смысле надежность часто понимается как мера одинаковости, повторяемости или связанности двух измерений одного и того же качества, одним и тем же тестом, или его параллельными вариантами. В исследовании надежность определялась расчетом коэффициента надежности теста по формуле : ■= k*(l-XPjqj/sy 2)/(k-l), где г коэффициент надежности теста; * к число заданий в тесте; £ Pjqj сумма дисперсий заданий теста; sy 2 общая дисперсия баллов испытуемых по всему тесту. Подстановка данных таблицы X дает следующий результат: г=15*(1-2,9/16,3)/(15-1)=0,88 Эта формула применяется при подборе в тест заданий одного уровня трудности таком, как в настоящем исследовании. 4. Расчет доверительного интервала производился по формуле: 131 |
Таким образом, в банк тестовых заданий тестирующей программы • закладываются тестовые задания, удовлетворяющие требованиям трудности, технологичности, вариативности, дифференцирующей способности и определенного уровня трудности. Тестовые задания не соответствующие требованиям выбраковываются и вместо них разрабатываются дополнительно новые задания. Формирование теста для каждого испытуемого происходит автоматически после указания номера темы, количества заданий и уровня трудности включаемых заданий. Трудность теста определяется суммарной трудностью заданий, его • образующих [1]. Чтобы уровень диагностирования был засчитан как пройденный, преподаватель определяет процент правильного выполнения заданий от общего количества, как правило, это 70%. Для оценки качества педагогического теста определялись его валидность и надежность. Валидность по содержанию означает, что задания теста полностью охватывают и при том в нужной пропорции все основные аспекты той области знания, подготовленность в которой этот тест оценивает. После составления тестов оценка валидности по содержанию проводилась на заседаниях предметно-методической комиссии, состоящей из опытных педагогов вуза. * Валидность по уровню (критерию) является показателем того, что уровень подготовки обучаемых сопоставим с уровнем трудности теста. Оценка валидности по уровню производилась сравниванием результатов тестирования экспериментальных групп и результатов оценивания этой же группы стандартными методами. Три экспериментальные группы студентов (по 25 человек) сначала проходили диагностирование уровня достижения целей обучения по отдельным учебным модулям с помощью традиционных способов * (устный опрос, письменный опрос, контрольная работа). Затем диагностирование проводилось с помощью тестов. Получение адекватных результатов служило признаком правильности формирования тестов и 127 выполнения организационно-педагогических и дидактических условий. В * целом, по разработанным экспериментальным материалам подавляющее число студентов (89-92% и выше от всех обучаемых экспериментальных групп) показали идентичные результаты, что позволило судить о валидности тестовых заданий по критерию. Надежность теоретически отражает идею точности измерения заданиями теста, представляющими только часть из генеральной совокупности всех возможных заданий. В практическом смысле надежность часто понимается как мера одинаковости, повторяемости или связанности двух измерений одного и того же качества, одним и тем же тестом, или его параллельными вариантами. ♦ В исследовании надежность определялась расчетом коэффициента надежности теста по формуле [101]: r= k*(l-SPjq/sy 2)/(k-l), где г коэффициент надежности теста; к число заданий в тесте; 2 Pj4j_ сумма дисперсий заданий теста; sy 2 общая дисперсия баллов испытуемых по всему тесту. После обработки данных получаем следующее значение надежности г= 15 *( 1 -2,9/16,3)/( 15-1 )=0,88 * Эта формула применяется при подборе в тест заданий одного уровня трудности таком, как в настоящем исследовании. Вероятность угадывания рассчитывалась по общеизвестным математическим зависимостям [59]: РУ=Р1*Р2*....Р25„ Где Pj=l/n, п — число ответов в тестовом задании, п=4. Вероятность угадывания правильного ответа в одном задании Ру=0,25. Вероятность угадывания • правильных ответов в двух тестовых заданиях соответственно: Ру=Р1*Р2 =0,25*0,25=0,0625 и т.д. 128 |