Типы компьютерных тестов, реализующих диагностические процедуры

Возможный отрицательный эффект от информатизации педагогических измерений может быть вызван тем, что:

• скорость работы школьников с компьютерной техникой во многих случаях становится важным фактором, влияющим на результаты педагогических измерений;
• процесс работы школьника за компьютером невозможно сохранить в динамике для последующего анализа и оценки, возможно сохранение и фиксация только лишь статического результата его работы, эквивалентного тому, что может быть отражено на листе бумаги;
• существующие стандарты образования и учебные программы не фиксируют тип техники и перечень программного обеспечения, используемых в обучении в системе общего среднего образования. Это влечет за собой возможность несоответствия типа аппаратного и программного обеспечения, используемых для обучения, компьютерам и программам, используемым для педагогических измерений, что может необоснованно повлиять на итоговый результат;
• во многих случаях средства ИКТ могут являться отвлекающим фактором, отрицательно сказывающимся на объективности педагогических измерений.

КОМПЬЮТЕРНОЕ ТЕСТИРОВАНИЕ КАК НАУКОЕМКАЯ ПЕДАГОГИЧЕСКАЯ ТЕХНОЛОГИЯ

•  
• В статье последовательно раскрываются подходы к современному пониманию компьютерной диагностики учебных достижений. Уделено внимание дидактическим основам диагностики результатов обучения. Приведены современные требования к форме и содержанию тестовых заданий, к процедуре компьютерного тестирования, анализируются особенности различных сред для тестирования. Обсуждаются ста- тистические основы обработки результатов диагностики. Показано, что компью- терное тестирование можно рассматривать как современную наукоемкую педагоги- ческую технологию.

Программа модернизации педагогиче- ского образования ставит задачи по пре- одолению отставания материально- технической базы и ресурсно-инфор- мационного обеспечения педагогических образовательных учреждений от совре- менных требований, а также создания и внедрения современных средств контро- ля качества образования на всех уровнях и ступенях системы непрерывного педа- гогического образования. Одним из эле- ментов системы качества образования является обеспечение мониторинга ре- зультатов образовательной деятельности на основе использования современных компьютерных сред и ресурсов.

• Программа модернизации педагогиче- ского образования ставит задачи по пре- одолению отставания материально- технической базы и ресурсно-инфор- мационного обеспечения педагогических образовательных учреждений от совре- менных требований, а также создания и внедрения современных средств контро- ля качества образования на всех уровнях и ступенях системы непрерывного педа- гогического образования. Одним из эле- ментов системы качества образования является обеспечение мониторинга ре- зультатов образовательной деятельности на основе использования современных компьютерных сред и ресурсов.

• Тем не менее, вопросы компьютерно- го тестирования остаются слабо разрабо- танными на уровне их дидактических особенностей, недостаточно осознанны их возможности и ограничения педагоги- ческим сообществом. Задача настоящей статьи — раскрыть и обсудить специфи- ку компьютерного тестирования с целью диагностики результатов обучения сту- дентов в вузе как наукоемкой педагоги- ческой технологии.
• Наукоемкость современного тестиро- вания обусловлена высоким научным уровнем применяемых в нем трех отно- сительно независимых компонентов — современной базовой статистической теории, передовых компьютерных средств обеспечения тестирования и со- временной дидактической теории диаг- ностики учебных достижений. Тем не менее, качество тестирования определя-
• ется и этими компонентами в совокупно- сти и взаимосвязи.

• Адекватность оцени- вания в большой степени обеспечивается использованием современной статистики объектов нечисловой природы. Техноло- гичность обеспечивается использованием современных компьютерных средств создания баз тестовых заданий, проведе- ния тестирования, обработки, хранения результатов. Дидактическая эффектив- ность определяется как первыми двумя компонентами, научный уровень кото- рых обеспечивает оперативность, про- гностичность, высокую чувствительность к коррекции, так и собственно педагоги- ческими подходами, лежащими в основе составления тестовых заданий, тестов, банков тестовых заданий. Рассмотрим последовательно современные подходы к выбору эффективного тестологического инструментария.

• Прежде всего, при выборе модели оценивания результатов образовательно- го процесса, диагностики учебных дос- тижений обучающегося нужно иметь в виду, что оценивается сложный объект. Это такой объект, который характеризу- ется многомерностью, разнотипностью, отсутствием достаточной информации о его внутренних взаимосвязях. Как прави- ло, отсутствует априорная информация о виде функций распределений парамет- ров, характеризующих объект или сово- купность объектов. Предположения о нормальности распределения, о линей- ной регрессионной зависимости, о мар- ковости процесса, об n-мерности гене- ральной совокупности и т. п. могут стать слишком сильными, и результаты обра- ботки данных не будут отражать адек- ватно реальные характеристики объекта. Возникает проблема (особенно для ма- лых выборок) статистической устойчи- вости, неоптимальности полученных решений. Моделируя сложные объекты, приходится оперировать разнотипными переменными. Перед статистикой вста- ет задача вычисления подобия между описаниями практически не сравнимых величин, поиска подходящей метрики для определения типа согласованности признаков, характеризующих сложные объекты.

• К сожалению, часто приходится кон- статировать, что исследования в области тестирования в основном опираются на параметрическую количественную ста- тистику, построенную на гипотезе о том, что большинство значений признаков есть выборки из нормальных генераль- ных совокупностей. Тем не менее, можно считать доказанным многочисленными исследованиями, что нормальных рас- пределений в исследуемой области не существует, как не существует здесь независимых случайных величин, сум- мирование которых предусматривается в вероятностной модели нормального распределения, и тем более — нор- мальных двумерных и многомерных распределений.
• Дополнительную сложность в разра- ботке современного статистического ап- парата оценивания результатов образова- тельного процесса представляет тот факт, что в экономике, социологии, психоло- гии, педагогике не все признаки, харак- теризующие многомерные объекты, мо- гут быть измерены количественно, оце- нить их можно только качественно. Ста- тистику объектов нечисловой природы называют непараметрической статисти- кой. В связи с этим направлением можно упомянуть о развитии только еще оформляющегося направления «стати- стики качеств», а также об интенсивно развивающемся аппарате «кластерного анализа», в котором разрабатываются методики решения задач классификации многомерных объектов по совокупности общих для этих объектов признаков. Таким образом, само развитие стати- стики как современной математической науки интенсивно стимулируется необ- ходимостью решать проблемы оценки качества объектов произвольной, в том числе нечисловой природы. Эта пробле- ма отражена на страницах некоторых монографий1, 2.