Сложность задачи связана с количеством операций, действий, команд, величин, данных и понятий, привлекаемых по условию и для решения. Трудность определяется процессом, технологией решения, наличием стандартных алгоритмов, различных по сложности методов решения. Трудность задания может определяться двояко: а) умозрительно, на основе предполагаемого числа и характера умственных операций, необходимых для успешного выполнения заданий, и б) после эмпирического апробирования заданий, с подсчетом доли неправильных ответов. В классической теории тестов многие годы рассматривались только эмпирические показатели трудности. В новых вариантах психологических и педагогических теорий тестов больше внимание стало уделяться характеру умственной деятельности учащихся в процессе выполнения тестовых заданий различных форм. При решении заданий можно проверить и оценить следующие умения: 1. Умение оперировать понятиями. Известно, что нельзя привести ни одного суждения, не оперируя понятиями. По нему судят о развитии мышления, памяти, внимания. 2. Умение применять теорию к решению практических и учебных задач. Практика является критерием истины и отвечает на вопрос: есть знания или их нет. 3. Умение самостоятельно мыслить. Оно заключается в умении выделить главное, сравнить это главное с данной ситуацией и найти решение. 4. Знание терминов профессионального иностранного языка. Оценивание этих умений осуществляется по количественному признаку числу допущенных ошибок, числу правильных ответов, времени выполнения задания, а также по качественному специально подобранным заданиям оптимальной сложности. Таким образом, определение сложности заданий формализовано по некоторым критериям. Следует отметить, что сложность тестового задания в 75 |
зованием частносистемных ассоциаций и наличием связи между знаниями, усвоенными в пределах одной главы или одного раздела. Третий уровень аналитический; достигнув его, курсанты проявляют умение обобщать, дифференцировать устойчивые знания, связывать ранее изученное с новыми знаниями, выделять главные идеи, основные положения темы, раздела, вскрывать разнообразные связи и проводить аналогии. Одним из подходов к установлению принадлежности данного тестового задания к тому или иному уровню является использование семантического графа модели знаний. Тестовым заданиям, сформированным на определенном шаге детализации модели знаний, можно присвоить соответствующий уровень сложности. В первом приближении тестовым заданиям информативного и аналитического классов, построенным для каждого из представленных уровней, можно установить соответствующие уровни сложности: М, Б, ГТ, С для информативных ТЗ, а также Ф, О, А, Т для аналитических ТЗ. Труднее обстоит дело с алгоритмическими заданиями. Понятие задачи связано с понятиями сложности и трудности ее. Сложность задачи связана с количеством операций, действий, команд, величин, данных и понятий, привлекаемых по условию и для решения. • Трудность определяется процессом, технологией решения, наличием стандартных алгоритмов, различных по сложности методов решения. Трудность задания может определяться двояко: а) умозрительно, на основе предполагаемого числа и характера умственных операций, необходимых для успешного выполнения заданий, и б) после эмпирического опробирования заданий, с подсчетом доли неправильных ответов. В классической теории тестов многие годы рассматривались только эмпирические показатели трудности. В новых вариантах психологических и педагогических теорий тестов больше * внимание стало уделяться характеру умственной деятельности учащихся в процессе выполнения тестовых заданий различных форм. -66 При решении заданий можно проверить и оценить следующие умения: 1. Умение оперировать понятиями. Известно, что нельзя привести ни одного суждения, не оперируя понятиями. По нему судят о развитии мышления, памяти, внимания. 2. Умение применять теорию к решению практических и учебных задач. Практика является критерием истины и отвечает на вопрос: есть знания или их нет. 3. Умение самостоятельно мыслить. Оно заключается в умении выделить главное, сравнить это главное с данной ситуацией и найти решение. 4. Знание языка математических наук или умение записать символами математические понятия и факты. Оценивание этих умений осуществляется по количественному признаку числу допущенных ошибок, числу правильных ответов, времени выполнения задания, а также по качественному специально подобранньгм заданиям оптимальной сложности. Таким образом, определение сложности заданий формализовано по некоторым критериям. Следует отметить, что сложность тестового задания в некоторой степени зависит от внутренних качественных характеристик, таких, как, например, информативность, вероятность угадывания, корректность условия, • интерфейс и т.н. Для удобства этим показателям присваивается весовой коэффициент, который может быть использован для корректировки оценки сложности и вопросов включения задания в банк данных ТЗ. Все эти показатели полезно оценивать на всех этапах создания ТЗ, что позволит планировать уровень сложности, контролировать показатели сложности и качества в процессе разработки, отфильтровывать некачественные задания, выбирать базовые образцы по классам эквивалентности. Для построения измерительной оценочной шкалы всем тестовым задани• ям присваивается балл сложности от 1 ... N. Он равен среднему значению суммы экспертных баллов с учетом весовых коэффициентов по качественным по-67 |