|
248 При экспертной оценке контролируемых результатов успешности обучения и профдеятельности по десятибальной шкале следует осуществлять перевод в пятибальную шкалу в соответствии со следующими критериями: Vj,5 = 5 (отлично), если экспертная (интегральная экспертная) оценка в 8 и более баллов (адекватна 1-ой группе пригодности к профдеятельности); Vj5 = 4 (хорошо), если экспертная (интегральная экспертная ) оценка в 7-6 баллов (адекватна 2-ой группе пригодности к профдеятельности). Vj,j =3 (удовлетворительно), если экспертная (интегральная экспертная ) оценка в 4-5 баллов (адекватна 3-ей группе пригодности к профдеятельноста); Vi,s = 2 (неудовлетворительно), если экспертная (интегральная экспертная ) оценка в 3 и менее баллов ( 4-ая группа пригодности к профдеятельности). Для оценки прогностической валидности чаще всего проводится корреляционный анализ с использованием коэффициента корреляции Пирсона, рассчитываемого по формуле: X(Xi-XXYi-Y) Rjly = '~1 N бхбу------• <3'2) где Xi результат i -го специалиста по комплекту тестов; Yi результат i -го специалиста за период обучения и профдеятельности (УкрО; X среднее арифметическое показателя X; Y среднее арифметическое показателя Y (Укр); бхсреднее квадратическое отклонение показателя X; бу . среднее квадратическое отклонение показателя Y (Укр); N количество испытуемых в группе. Этот коэффициент учитывает не только положение результатов испытуемого в группе, но и степень их отклонения от группового среднего значения. |
231 i В группу экспертов рекомендуется включать начальников курсов, преподавателей и непосредственных начальников, которые определяют результаты успешности обучения (службы) по шкапам экспертных оценок (табл. 3.1). Интегральная экспертная оценка определяется ее средним значением для каждого оцениваемого результата успешности обучения и службы. При экспертной оценке контролируемых результатов успешности обучения и службы по десятибальной шкале следует осуществлять перевод в пятибальную шкалу в соответствии со следующими критериями: Vj,5 = 5 (отлично), если экспертная (интегральная экспертная) оценка в 8 и более баллов (адекватна 1-ой группе профпригодности); V,;5 = 4 (хорошо), если экспертная (интегральная экспертная ) оценка в 7-6 баллов (адекватна 2-ой группе профпригодности). Vi5 =3 (удовлетворительно), если экспертная ( интегральная экспертная ) оценка в 4-5 баллов (адекватна 3-ей группе профпригодности); Vi 5 = 2 (неудовлетворительно), если экспертная ( интегральная экспертная ) оценка в 3 и менее баллов ( 4-ая группа профпригодности). Для оценки прогностической валидности чаще всего проводится корреляционный анализ с использованием коэффициента корреляции Пирсона, рассчитываемого по формуле: 2(Xi-X XY i-?) ЫбГбу <3'2) где Xi результат i -го сотрудника по комплекту тестов; Yi результат i -го сотрудника за период обучения и службы в вузе (Укр,); X среднее арифметическое показателя X; Y среднее арифметическое показателя Y (Укр); бхсреднее квадратическое отклонение показателя X; I 2 3 2 бу . среднее квадратическое отклонение показателя Y (Укр); N количество испытуемых в группе. Этот коэффициент учитывает не только положение результатов испытуемого в группе, но и степень их отклонения от группового среднего значения. 2) Ретестовая надежность. Под ретестовой надежностью понимается согласованность результатов теста, получаемых при повторном его применении к тем же испытуемым в различные моменты времени, с использованием разных наборов эквивалентных заданий. Коэффициент надежности равен корреляции между результатами двух обследований с использованием параллельных форм теста. Ретестовая надежность показывает, в какой степени результаты теста можно распространить на различные случаи его применения. Чем выше надежность, тем менее чувствительны результаты к обычным изменениям состояния испытуемого и обстановки тестирования. При этом интервал между двумя последовательными применениями теста обычно не должен превышать 6 месяцев /8,9/. При использовании шкал порядка применяется коэффициент ранговой корреляции Спирмена /31 /: р = fiJS JL A (3.3) п3п2 где d j разность рангов iго испытуемого; пколичество испытуемых в группе. Кроме того, в ряде случаев может быть использован коэффциент корреляции, рассчитываемый по формуле (3.2). Определение статистической значимости полученной корреляции может проводиться с помощью критерия Стьюдента ( t ), вычисляемого по формуле /38/: 1= Чи) (3.4) |