|
|
|
|
ЧАСТЬ
II
Методические рекомендации по введению системы тестирования
учебных достижений студентов в вузе
Разработано: М.В. Артамонова
методист высшей категории
УМУ ГУ-ВШЭ
Научная редакция: И.Б. Назарова
Канд. соц. наук, Начальник Отдела
развития и контроля качества
образовательных программ
УМУ ГУ-ВШЭ
Задачи проекта
Присоединение России к странам Болонской декларации катализировало процессы реорганизации, которые происходят сейчас в высших учебных заведениях Российской Федерации. Необходимость выхода на «европейский уровень» ставит перед органами управления задачу привести Российскую систему ВПО в соответствие с общеевропейскими стандартами и нормами, что связанно с коренными изменениями философии российского образования и сложившимися традициями. Основные задачи, согласно европейскому соглашению, которые рекомендуется выполнить до 2010 г., включают 5 условий, одним из которых является «развитие сотрудничества в сфере обеспечения качества образования с целью создания сопоставимых критериев и методологий». В этой связи создание методики объективной оценки образовательной деятельности вуза и её подсистемы оценки учебных достижений студентов приобретает исключительное значение. Система тестирования – это универсальный инструмент для определения обученности студентов на всех уровнях образовательного процесса. В современных условиях овладение методикой тестирования и создание баз тестовых заданий по учебным дисциплинам требует больших трудозатрат педагогов. В связи с этим тестирование медленно внедряется в учебный процесс.
Предлагаемые методические рекомендации имеют цель помочь при создании вузовской системы тестирования избежать типичных ошибок процесса внедрения. Проект был разработан для внедрения в Государственном Университете - Высшей Школе Экономики и может быть использован для создания собственного Положения адаптированного для конкретных условий конкретного вуза. Процесс внедрения может быть успешным только при выполнении четырех минимальных требований:
Осознанной и активной поддержке руководства вуза, выраженной как минимум в утверждении приказов и распоряжений, регламентирующих процесс внедрения.
Организации обучения преподавателей технологии составления тестов.
Материальном и моральном стимулировании преподавателей.
Наличии мотивированного персонала – организаторов, выполняющих штабные функции сбора, учета и технического редактирования тестов.
Достаточного компьютерного и программного обеспечения (для системы компьютерного тестирования).
В процессе эксперимента по «Внедрению системы тестирования в учебный процесс ГУ-ВШЭ», на основе результатов социологического исследования в ГУ-ВШЭ в 2004/2005г., уточнялось содержание мотиваций преподавателей включения в инновационную педагогическую деятельность, в частности, готовность применять и разрабатывать технологии тестирования и тестовые материалы для оценки учебных достижений студентов.
Обоснование программы проведения эксперимента содержало следующие положения:
В целях создания единого методического подхода к определению учебных достижений студентов в ГУ-ВШЭ предусматривается использование единой системы компьютерного тестирования.
Необходимость внедрения системы компьютерного тестирования в ГУ-ВШЭ диктуется введением с 2004г. обязательной процедуры тестирования оценки качества подготовки студентов по дисциплинам федерального компонента при Аттестационной экспертизе вузов Министерством науки и образования РФ.
Тестирование –– инструмент вузовского мониторинга
и прогнозирования. Мониторинг как контролирующая и диагностическая
система
обеспечивает преподавателя объективной и оперативной информацией об уровне усвоения студентами обязательного учебного материала, а администрацию об эффективности управления.
Система компьютерного тестирования –– это универсальный инструмент для определения обученности
студентов на всех уровнях образовательного процесса. Учебный процесс включает тестирование с дробными функциональными задачами как внутривузовский компонент системы. Можно выделить три уровня: тестирование
для проведения оперативного и текущего
контроля (темы семинаров, разделы и собственно тестирование по дисциплине); тестирование для проведения рубежног
о контроля (по дисциплинам любого содержательного или временного модуля, по блокам дисциплин ГСЭ, ЕН, ОПД, СД, по дисциплинам специализации или совокупности дисциплин, выделенных по любому другому основанию); тестирование для проведения итогового
контроля (междисциплинарный экзамен, предварительный этап госэкзаменов) результирующее тестирование в конце обучения - проверка уровня готовности специалиста, его соответствие требованиям ГОС
. Единая система тестирования позволяет комбинировать тестовые задания разных дисциплин в рамках одного блока или дисциплин одной тематической направленности.
Результаты текущего и рубежного тестирования –– это не только объективный показатель освоения студентами темы, раздела или дисциплины, но и, прежде всего, показатель качества работы преподавателя
. Вузовская база тестов может включать контрольный тест по дисциплине, предлагаемый студентам каждого следующего набора для сравнения ежегодных результатов обучения (в том числе разными преподавателями).
Создание тестов на высоком методологическом уровне требует от преподавателя разработки четкой понятийно-терминологической структуры курса
, т.е. таблицы проверяемых в тестах понятий и тезисов, структурированных по темам и разделам программы учебной дисциплины.
Такая разработка, наряду с программой, является самостоятельным методическим материалом обеспечения качества преподавания. Кроме того, дает возможность на макроуровне устранять дублирование тем в дисциплинах
в образовательных профессиональных программах.
Понятийно-терминологические структуры курсов – тезаурусы – основа для сопоставимости
образовательных программ, образовательных уровней при разработке совместных образовательных программ с зарубежными вузами.
Для студентов работа с компьютерными тестами способствует освоению компьютера как инструмента учебной деятельности
, приучает к самоконтролю. Тестирование в самостоятельной работе
студентов имеет не столько контролирующие, сколько обучающие функции
(для отработки отдельных тем, типов задач, подготовки к зачетам и т. д.). Для самостоятельной работы студентов система тестирования представляет возможность использования электронных С
D библиотек
, а также интернет-тестирования (домашняя и самостоятельная работа). Электронные библиотеки CD методического обеспечения дисциплин могут содержать наряду с тестами тренинга, самоконтроля, различные учебные материалы. Выдача CD –компакт-дисков производится в компьютерном классе или в читальном зале учебной библиотеки. CD – компакт-диски с тестами по дисциплине могут выдаваться с учебными пособиями в начале учебного года, семестра или модуля.
Система компьютерного тестирования является неотъемлемой составляющей для перспективного развития дистанционных форм обучения
.
Большое значение имеет система тестирования для определения качества образовательного процесса в филиалах вуза. Применение её дает возможность с наименьшими затратами отслеживать соответствие содержания образования головного вуза и филиалов.
Проверка филиалов с помощью тестирования –– эффективный метод для последующей корреляции и унификации учебных программ, педагогических методик.
В системе дополнительного образования и второго высшего образования
тесты могут быть использованы не только как методическое обеспечение дисциплин, но в основном, для оценки и перезачета
дисциплин по образовательным программам других вузов при поступлении на дополнительные ОПП.
Тесты могут быть использованы Учебно–методическими Объединениями
(УМО) при вузе, одной из функций которых является разработка методических материалов в целом по направлению/специальности. Контрольный пакет фондов контрольных заданий
в форме тестов по дисциплинам ОПП является средством для оценки соответствия качества подготовки специалистов при самообследовании и аттестации вуза и при оказании УМО консультационных услуг юридическим и физическим лицам.
Вуз имеет возможность реализовать через торговую сеть тестовые программы и базы тестов
по учебным дисциплинам, что решает задачи: популяризация педагогического опыта вуза, подтверждение его высокого статуса на рынке труда, дополнительная реклама вуза среди потенциальных работодателей и т.д.
Программа эксперимента по внедрению системы тестирования в учебный процесс ГУ-ВШЭ
Цель: оптимизация образовательного процесса и контроль качества подготовки специалистов.
Задача: Внедрение системы тестирования в учебный процесс.
Средства решения: Создание Базы тестов вуза, разработка процедуры тестирования и схемы внедрения её в учебный процесс, мониторинг.
Результат: Тестирование как вид учебной деятельности и инструмент контроля в учебном процессе вуза.
Задачи:
1. В рамках создания общеуниверситетской системы контроля качества образовательного процесса в ГУ-ВШЭ организовать систему тестирования для проверки учебных достижений студентов по дисциплинам федерального компонента Государственного образовательного стандарта ВПО по направлениям, реализуемым в ГУ-ВШЭ.
2. Организовать системную проверку (срезов) знаний студентов на основе тестирования.
3. Организовать общеуниверситетскую базу тестов.
4. Организовать базу тестов для самостоятельной работы студентов (интернет-тестирование, CD, медиатека).
5. Провести НИР по апробации тестов, выбору компьютерной оболочки, внедрению оптимальной процедуры тестирования.
6. Осуществить подготовку кадров из ППС и УВП - специалистов в области тестирования.
7. Подготовить материалы (тезаурусы курсов, контрольные тесты) для сопоставимости отдельных образовательных программ, реализуемых в ГУ-ВШЭ с образовательными программами зарубежных вузов.
8. Подготовить тесты для контроля качества и стандартизации образовательных программ, реализуемых филиалами ГУ-ВШЭ.
9. Подготовить комплекты тестов для УМО в области экономики и менеджмента.
10. Подготовить комплекты тестов по отдельным ОПП для структур Дополнительного образования и второго высшего образования.
11. Организовать подготовку к аттестации ОПП в части тестовой экспертизы ЦТВПО Минобрнауки в рамках самообследования факультетов.
12. Представлять руководству вуза и преподавателям объективную информацию об истинном уровне обученности студентов и качестве подготовки выпускников.
На этапе разработки документационного обеспечения системы тестирования было проведено предварительное исследование ситуации в Университете.
1. Анализ статистических данных по Университету о количестве и распределении по предметным областям знаний преподавателей, которые используют методику тестирования в учебном процессе. Анализ проводился по ежегодным отчетам о методической работе кафедр и электронному опросу преподавателей.
2. Анкетирование преподавателей с целью выяснения их мотивации применения или отказа от методов тестирования и потребности повышения уровня компетентности в технологии составления тестов по учебным дисциплинам.
Исследование проводилось методом электронного опроса и анкетирования экспертов из числа преподавателей, а также в форме неформализованных интервью с преподавателями и представителями администрации вуза.
Наиболее мотивированны оказались преподаватели, работающие на 1,2, курсах – на больших потоках, вынужденные принимать экзамены более чем у 100 студентов в один день экзамена.
Большинство (82%) преподавателей возрастной группы 50 и более лет, из числа опрошенных, включенные во множественную занятость и имеющие большую педагогическую нагрузку, отрицательно относятся к введению тестирования. Эта же группа преподавателей считает, что; техническое оформление тестов, освоение новых компьютерных методик слишком трудоемко и не оправдано.
В качестве основных причин отказа, нежелания, ограниченного применения технологии тестирования преподаватели называют:
· увеличение трудозатрат на этапе разработки тестовых заданий;
· невозможность сохранить конфедициальность информации;
· проблему защиты интеллектуальной собственности;
· ограниченность тестовых технологий в оценке качественной «мыслительной» составляющей знаний студентов;
· сложность унификации форм проверки результатов как ограничение творческого начала педагогической деятельности;
· излишнюю формализованность ответов в тестовых заданиях как причину ограничения полноты ответов студентов;
· отсутствие материального стимулирования со стороны руководства вуза.
На этапе проведения организационных изменений в вузе в период внедрения системы тестирования необходимо поддерживать постоянную систематическую обратную связь со всеми участниками процесса и проводить корректирующее управление.
Рекомендации составлены с использованием идей и технических материалов В.А. Липова (Национальный институт бизнеса), СГА, Центра образовательных коммуникаций тестирования профессионального образования (АСТ-центр), МГУПа. Выражаем благодарность за содержательные замечания начальнику юридического отдела ГУ-ВШЭ Т.А. Ларьковой.
Выражаем благодарность руководству ЦОКТПО и лично В.И. Васильеву и Т.Н. Тягуновой за поддержку и возможность публикации.
После публикуемых материалов (на последних страницах) читателям предлагается заполнить Анкету, для получения информации о практической полезности данных материалов, а также для распространения среди преподавателей, сотрудников учебных и методических отделов и администрации вузов, которые заинтересованы в применении тестирования в образовательном процессе.
Проект
Государственный университет – Высшая школа экономики
Положение о системе тестирования в образовательном процессе ГУ-ВШЭ
I. Общие положения
Система тестирования внедряется в образовательный процесс Государственного университета – Высшей школы экономики (далее Университет) в соответствии с введением в 2004 году обязательной процедуры тестирования для оценки качества подготовки студентов по дисциплинам федерального компонента при проведении Аттестационной экспертизе вузов Министерством науки и образования Российской Федерации.
Система тестирования внедряется в образовательный процесс с целью его оптимизации и повышения качества подготовки студентов, в соответствии с документом «Планирование мероприятий, разработка и утверждение документов, необходимых для внедрения системы тестирования» (Приложение №1).
Тестирование может проводиться в разных формах (письменной и компьютерной), не исключая и не заменяя другие формы контроля качества знаний студентов.
Создание и внедрение системы тестирования в учебный процесс Университета подразумевает решение следующих задач:
1. Подготовка специалистов по созданию тестовых заданий, базы тестов, обеспечению внедрения и функционирования системы тестирования.
2. Создание, совершенствование и пополнение базы тестов федерального и вузовского компонентов по всем направлениям подготовки и специальностям Университета.
3. Разработка процедуры тестирования.
4. Организация мониторинга качества знаний студентов на основе тестирования.
5. Внедрение компьютерного тестирования в систему контроля качества знаний студентов.
6. Обеспечение возможности самостоятельной проверки знаний студентов с использованием технических средств (интернет-тестирование, CD-библиотека).
7. Постоянное совершенствование организации образовательного процесса по итогам анализа результатов тестирования.
Тестирование – инструмент внутривузовского мониторинга контроля качества подготовки студентов.
Педагогический мониторинг – форма организации сбора, хранения, обработки и распространения информации о деятельности педагогической системы, обеспечивающая непрерывную оценку состояния и прогнозирование её развития. Мониторинг как контролирующая и диагностическая система обеспечивает регулярное отслеживание качества усвоения знаний и умений в учебном процессе, предоставляет преподавателю объективную и оперативную информацию об уровне усвоения студентами обязательного учебного материала.
Методы тестирования, наряду с другими формами контроля, также могут использоваться:
При проведении вступительных испытаний в ГУ-ВШЭ.
В филиалах ГУ-ВШЭ для определения качества образовательного процесса. Применение тестирования дает возможность с наименьшими затратами отслеживать соответствие содержания образования Университета и филиалов. Проверка филиалов с помощью тестирования – эффективный метод для последующей унификации учебных программ, педагогических методик.
В системе дополнительного образования и второго высшего образования[1]
– как методическое обеспечение дисциплин и для оценки и перезачета дисциплин по образовательным программам других вузов при поступлении на дополнительные образовательные профессиональные программы (ОПП).
Тестовые программы и базы тестов по учебным дисциплинам и методическое обеспечение к ним могут издаваться и распространяться с целью популяризации педагогического опыта вуза, подтверждения его статуса на рынке образовательных услуг.
II. Виды тестового контроля
Вид тестового контроля определяется целями тестирования – получение информации об уровне знаний студентов на определенном этапе обучения. В соответствие с целями определяются единые хронотопные (содержательно-временные) точки тестирования в учебном процессе.
Виды тестирования:
- текущий и оперативный тест-контроль знаний студентов;
- рубежный тест-контроль знаний студентов;
- итоговый тест-контроль знаний студентов;
- тренинговое тестирование.
Текущее и оперативное тестирование (диагностическое) проводится преподавателем на семинарах для выявления исходного уровня готовности студента к дальнейшему обучению, проверки качества усвоения знаний по определенным темам семинаров, разделов программы дисциплины.
Рубежное тестирование проводится по окончании модуля, семестра, учебного года, для рубежного контроля: по дисциплине, по блокам дисциплин: гуманитарных социально-экономических дисциплин (ГСЭ), естественнонаучных дисциплин (ЕН), общепрофессиональных дисциплин (ОПД), специальных дисциплин (СД), по дисциплинам специализации или совокупности дисциплин, выделенных по любому другому основанию. Результаты тестирования используются преподавателем для формирования куммулятивной оценки по дисциплине. Целью рубежного тестирования является определение степени освоения студентами области знаний и умений (уровня компетентности) по части профессиональной образовательной программы.
Итоговое тестирование проводится с целью контроля остаточных знаний студентов; проверки уровня готовности студента к аттестационным испытаниям. Тестирование проводится в соответствии с утвержденным графиком, но не позднее 6 месяцев с момента сдачи зачета/экзамена по тестируемой дисциплине. Результаты итогового тестирования документируются и являются необходимым условием допуска к государственным аттестационным испытаниям.
Тренинговое тестирование является разновидностью самостоятельной работы студентов, используется преподавателем как о
- собственно методические материалы;
- рекомендации, руководство, указания, инструкции к методическим материалам;
- оценочные средства контроля обученности (контроля остаточных знаний).
К методическим материалам (объектам, с которыми работает студент) относятся: учебник, сборник задач или ситуаций, дополнительные главы учебника, ридер, хрестоматия, пособие, обучающая программа, тесты).
Методические рекомендации включают инструкции для студента по работе с методическими материалами (как студент должен работать и какой результат должен быть получен в итоге).
Тесты по всему материалу курса используются в качестве контрольно-методического обеспечения и являются оценочными средствами, с помощью которых на этапе рубежного или итогового испытания оценивается усвоение студентом материала, его степень обученности определенным учебным действиям (например, решению задач, составлению анкеты, работе с компьютерными программами и т.д.).
Результаты текущего и рубежного тестирования являются не только объективным показателем освоения студентами темы, раздела или дисциплины, но и показателем качества работы преподавателя.
III. Организация Базы тестов Университета
Внедрение системы тестирования подразумевает создание, пополнение и совершенствование общей Базы тестов ГУ-ВШЭ. Единая система тестирования позволяет комбинировать тестовые задания разных дисциплин в рамках одного блока или дисциплин одной тематической направленности для проведения различных видов тест-контроля. База тестовых заданий включает тесты открытого доступа для тренингового и текущего тестирования и комплекс закрытых тестов для проведения контрольных мероприятий.
База тестов Университета складывается из баз тестов по образовательным программам, реализуемых факультетами. Каждая кафедра разрабатывает комплекс тестовых заданий по каждой из учебных дисциплин, закрепленных за кафедрой на текущий учебный год. Администрацией факультетов совместно с Учебно-методическим управлением ( далееУМУ) утверждаются календарные сроки представления тестов в УМУ. Контроль выполнения сроков ведет представитель администрации факультета (ответственный от факультета). Ответственность за общее руководство и соблюдение сроков несет декан факультета. Сданные в УМУ тесты методист проверяет на соответствие «Инструкции по составлению комплекта тестовых заданий по учебной дисциплине». При необходимости, тесты могут быть переданы методистом на редактирование и содержательную экспертизу рецензенту. В случае, отрицательной рецензии и/или несоответствия инструкции, тесты возвращаются автору на доработку. После доработки методист оформляет паспорт теста. Паспорт теста является документом, подтверждающим выполнение работы. Затем ответственный методист УМУ передает тесты в Управление информатизации для формирования общей базы тестов ГУ-ВШЭ.
Организация отчетности и процедуры накопления тестов включает:
1. Утверждение приказом ректора (первого проректора)
- ответственных от кафедр, факультетов, УМУ и других подразделений за ведение отчетности о предоставлении в УМУ тестов по учебным дисциплинам,
- календарных графиков разработки тестов по дисциплинам федерального компонента ОПП, реализуемых факультетами.
Разработку тестов по учебным дисциплинам преподавателями в соответствии с «Инструкцией по составлению комплекта тестовых заданий по учебной дисциплине»(далее «Инструкция»).
3. Оформление методистом Паспорта (см. приложение № 4) на разработанный и сданный в УМУ тест. (Паспорт теста является документом, подтверждающим выполнение работы по договору, а также основанием для дополнительных финансовых начислений и/или расчета дополнительной учебной нагрузки ППС) (см. приложение № 5).
4. Аккумуляцию тестов
- на кафедре (по дисциплинам, закрепленным за кафедрой);
- в УМУ (для проведения контрольных мероприятий);
- в Управлении информатизации (для формирования базы тестов ГУ-ВШЭ).
5. Представление в Отдел развития и контроля качества образовательных программ УМУ отчетности по факультету о разработке кафедрами тестов осуществляет представитель администрации факультета,
ответственный по приказу не позднее мая текущего учебного года.
Учет тестов на кафедрах и факультетах, передача тестов в Учебно-методическое управление ГУ-ВШЭ, учет наличия тестов в УМУ ведется в электронном виде с занесением в специальные формы информации о тесте (форма № 1 – приложение №2). Схема взаимодействия структурных подразделений – приложение № 3).
IV. Ответственность участников процесса и структурных подразделений
Ответственость за разработку и предоставление преподавателям и руководству инструктивных документов несет методист Отдела развития и контроля качества ОПП УМУ.
Ответственность за своевременную разработку теста по учебной дисциплине в соответствии с «Инструкцией» и календарным графиком, несет разработчик тестов.
Ответственность за организацию базы тестов по дисциплинам кафедры несут заведующие кафедрами.
Ответственность за организацию базы тестов по дисциплинам ОПП факультетов несут деканы факультетов.
Ответственность за организацию, хранение и своевременную модификацию базы тестов по дисциплинам ОПП, реализуемых в ГУ-ВШЭ несут Отдел развития и контроля качества образовательных программ УМУ (содержательная часть) и Управление информатизации ГУ-ВШЭ (техническая часть).
Ответственность за сохранность контрольных банков базы тестов ГУ-ВШЭ несет разработчик теста, УМУ в лице его представителя – методиста (в соответствии с приказом).
Ответственность за программное и техническое обеспечение функционирования базы тестов ГУ-ВШЭ несет Управление информатизации в лице его представителя (в соответствии с приказом).
V. Технологический цикл разработки комплекта тестовых заданий по учебной дисциплине
Технологический цикл разработки теста по одной учебной дисциплине включает следующие этапы:
1. Организацию работы квалифицированного специалиста по учебной дисциплине для разработки тестовых заданий; (УМУ, кафедра).
2. Обучение разработчика тестов (преподавателей, сотрудников) принципам составления теста (курсы тестологов).
3. Разработку преподавателем комплекта тестовых заданий:
- таблицы спецификации;
- уровней сложности;
- тестовых заданий.
4. Организацию экспертизы содержания тестовых заданий (рецензент).
5. Организация рецензирования, редактирование теста (УМУ, рецензент).
6. Согласование изменений с автором-разработчиком тестовых заданий (по желанию одной из сторон).
7. Апробация теста (УМУ, кафедра, преподаватель).
8. Окончательное формирование комплекта тестовых заданий по учебной дисциплине (автор-разработчик).
9. Для компьютерного тестирования дополнительно:
- обеспечение ввода теста в формат программы;
- организация и проведение апробации теста с его последующей корректировкой;
- занесение тестовых заданий в базу тестов Университета.
VI. Технология составления теста
Тест по учебной дисциплине представляет собой сформированный в определенной последовательности перечень тестовых заданий, количество и состав, которых зависит от целей тестирования. Дидактическое содержание теста определяется целью тестирования и предметной областью дисциплины.
Создание тестов на высоком методологическом уровне требует от преподавателя разработки четкой понятийно-терминологической структуры курса, проверяемых в тестах понятий и тезисов, структурированных по темам и разделам программы учебной дисциплины. (См. п. №3 «Инструкции по составлению комплекта тестовых заданий по учебной дисциплине»). Такая разработка, наряду с программой, является самостоятельным методическим материалом обеспечения качества преподавания и дает возможность на макроуровне устранять дублирование тем в дисциплинах.
Понятийно-терминологические структуры курсов – тезаурусы[2]
являются основой для сопоставимости образовательных программ и образовательных уровней при разработке совместных образовательных программ с зарубежными вузами.
Технология создания теста по учебной дисциплине предполагает несколько последовательных этапов:
Постановка целей и задач предмета и форм педагогического контроля. Объем часов учебной дисциплины определяет целесообразность тестирования и количество тестовых заданий. Минимальное число тестовых заданий для вариативности теста 120. По дисциплинам объемом менее 54 академических часов трудоемкости возможно проектирование междисциплинарных, комплексных тестов по блокам сопредельных пограничных дисциплин (преподаватель).
Определение целей тестирования:
- обучение студентов (самостоятельный тренинг);
- текущий контроль знаний студентов (диагностика усвоения, отдельных тем и разделов);
- рубежный контроль знаний студентов;
- итоговый контроль знаний студентов (по всей программе учебной дисциплины);
- контроль остаточных знаний (по одной дисциплине, циклу дисциплин).
Анализ содержания учебной дисциплины, систематизация материала, выделение функциональной и логической структур (структурно-логическая схема дисциплины), информационное насыщение каждого из разделов учебной дисциплины (преподаватель).
Разработка таблиц спецификации теста по дисциплине (таблица уровня сложности тестовых заданий, таблица проверяемых в тесте понятий) в соответствии с техническим заданием (преподаватель).
Разработка тестовых заданий (преподаватель).
Экспертиза содержания и формы заданий (рецензирование) и корректировка. В качестве эксперта может выступать преподаватель той же или тематически близкой дисциплины направления, при наличии ученой степени не меньшей, чем у разработчика тестов.
Формирование тестов в соответствии с поставленными учебными задачами. Определение объема (количества тестовых заданий) в тесте и времени его выполнения.
Разработка методики тестирования, определение и расчет показателей оценки. Составляется элементарная шкала: количество тестовых заданий предъявленных к выполнению соотнесено с количеством правильных ответов. Определяется диапазон положительной оценки. Количество правильных ответов для получения зачета, оценки хорошо, отлично и т.д.
Апробация теста.
Корректировка и добавление новых заданий для улучшения системообразующих параметров теста на основании результатов апробации.
Формирование окончательного варианта теста.
Разработка инструкций для пользователей (преподавателей и студентов).
VII. Организация системы компьютерного тестирования
Система компьютерного тестирования – универсальный инструмент для определения обученности студентов на всех уровнях образовательного процесса. Компьютерное тестирование как инструмент контроля используется наряду с другими методами оценки знаний студентов.
Работа студентов с компьютерными тестами способствует лучшему освоению компьютера как инструмента учебной деятельности, приучает к самостоятельной работе и самоконтролю. Тестирование в ходе самостоятельной работы студентов имеет как контролирующие, так и обучающие функции (для отработки отдельных тем, типов задач, подготовки к зачетам). Самостоятельная работа студентов возможна с использованием ресурсов электронных библиотек (CD – библиотек), а также интернет-тестирования (домашняя и самостоятельная работа). Электронные библиотеки методического обеспечения дисциплин могут содержать наряду с тестами тренинга, самоконтроля, различные учебные материалы. Выдача компакт-дисков (CD) производится в компьютерном классе или в читальном зале учебной библиотеки. Компакт-диски с тестами по дисциплине могут выдаваться вместе с учебными пособиями в начале учебного года, семестра или модуля.
Создание системы компьютерного тестирования включает организацию и решение следующих задач:
1. Разработка процедуры тестирования как вида учебной деятельности.
2. Подготовка тестологов и администраторов системы тестирования.
3. Наличие единого программного обеспечения (программы конструктора тестовых заданий базы тестов и программы процедуры тестовой проверки и анализа результатов):
- конструктор тестовых заданий (программы ввода нового задания в базу тестов);
- программу формирования теста (программу отбора тестовых заданий из базы тестов по дисциплине, например, по уровню сложности);
- программы тестирования (локальная и сетевая; программа, обеспечивающая предъявление определенного количества тестовых заданий студенту на мониторе за определенный период времени или распечатку теста на бланке);
- протокол тестирования для студента (документ-распечатка оценки, с возможным предъявлением заданий с неправильными ответами);
- анализ и статистику результатов тестирования для преподавателя;
- анализ и статистику результатов тестирования для администратора системы (мониторинг).
4. Создание, пополнение и совершенствование базы тестов Университета.
Приложение № 1
Этапы внедрения системы компьютерного тестирования
в учебный процесс ГУ-ВШЭ
Первый этап: 01.06.2005 г. – 01.07.2006 г.
Второй этап: 01.09.2006 г. – 01.07.2010 г.
Первый этап
01.06.2005 г. – 01.07.2006 г.
Планирование мероприятий, разработка и утверждение документов, необходимых для внедрения системы тестирования
1. Подготовка плана мероприятий по внедрению системы тестирования.
2. Разработка и утверждение Положения о системе тестирования в образовательном процессе ГУ-ВШЭ.
3. Подготовка и утверждение Приказа об организации системы тестирования в образовательном процессе ГУ-ВШЭ.
4. Разработка и утверждение формы Инструкции по составлению тестовых заданий.
5. Разработка и утверждение формы Паспорта теста.
6. Разработка и утверждение требований к составлению тестов (в том числе таблиц спецификации теста).
7. Подготовка юридического обоснования тестирования в учебном процессе (Устав, договор на коммерческое обучение).
8. Подготовка предложений о внесении изменений в нормативные локальные документы, регламентирующие учебный процесс в ГУ-ВШЭ.
9. Проверка наличия тестовых разработок в ГУ-ВШЭ.
10. Анализ пригодности имеющихся в ГУ-ВШЭ тестовых разработок для задач системы тестирования, в том числе:
10.1. Анализ материалов, представленных к проведению аттестации вуза.
10.2. Отбор тестовых материалов для доработки авторами (преподавателями).
11. Подготовка тестовых материалов для проведения контроля знаний студентов (тестовых срезов).
12. Создание рабочей группы из преподавателей для проведения экспертной оценки организации и включения тестирования в учебный процесс.
13. Проведение методического совещания с деканами факультетов и заведующими кафедрами ГУ-ВШЭ о задачах тестирования и условиях реализации этих задач на факультетах.
14. Разработка и утверждение инструкции по проведению процедуры тестирования.
10. Подготовка графика сдачи тестов кафедрами.
11. Подготовка распоряжения об утверждении графика разработки кафедрами тестов по преподаваемым дисциплинам.
12. Подготовка материалов для разработки инструкций и таблиц учета тестов.
12.1. Анализ базовых планов ОПП
12.2. Анализ перечня дисциплин федерального компонента для каждой ОПП;
12.3. Проверка наличия методического обеспечения курса;
12.4. Подготовка кафедрами списков преподавателей, которые будут выполнять разработку тестов по конкретной дисциплине. Разработка унифицированных форм для учета тестов в отделе развития и контроля качества.
13. Разработка норм оплаты первичного составления тестовых заданий.
14. Составление графика посещения заседаний кафедр и проведения обучающих семинаров по разработке тестов.
15. Организация баз тестов по ОПП.
16. Разработка нормативной документации по рецензированию тестовых материалов.
17. Подготовка технических заданий на рецензирование тестов.
18. Создание страницы «Система тестирования» на портале ГУ-ВШЭ.
19. Подготовка обоснования на закупку компьютерной оболочки.
19.1.Организация экспертной группы;
19.2.Анализ возможных вариантов и выбор оптимальной программы.
20 Подготовка тестов к аттестации бакалавриата факультета психологии, специальности логистика.
21 Организация курсов повышения квалификации в области тестирования для преподавателей и сотрудников.
22 Подведение итогов первого этапа. Отчет.
Второй этап
01.09.2006 г. – 01.07.2010 г.
Планирование мероприятий, разработка и утверждение документов, необходимых для введения системы компьютерного тестирования
1. Корректировка нормативной документации в соответствии с задачами компьютерного тестирования.
2. Организация курсов повышения квалификации в области компьютерного тестирования для преподавателей и сотрудников.
2.1. Подготовка администраторов для ведения компьютерной базы тестов ГУ-ВШЭ.
2.2. Подготовка тестологов для проведения тестирования.
3. Организация внешней экспертизы тестов, как необходимой процедуры при сопоставимости (валидизации) и сертификации образовательных программ зарубежных вузов в рамках Болонского процесса.
4. Организация баз тестов филиалов.
4.1. Организация сотрудничества с филиалами и оценка возможности реализации опыта тестового контроля ГУ-ВШЭ в филиалах.
4.2. Анализ базовых планов ОПП, реализуемых в каждом филиале.
4.3. Анализ перечня дисциплин федерального компонента для каждой ОПП.
4.4. Сопоставление базовых планов филиалов и ГУ-ВШЭ.
5. Организация, ведение и модификация базы тестов всех факультетов по дисциплинам естественно научного (ЕН) блока.
6. Организация, ведение и модификация базы тестов всех факультетов блока гуманитарных социально-экономических дисциплин (ГСЭ).
7. Организация ведения и модификация баз тестов по ОПП ГУ-ВШЭ.
8. Включение видов тест-контроля как регулярной формы контроля в учебный процесс по мере накопления баз тестов для каждой ОПП, реализуемой ГУ-ВШЭ.
9. Проведение тест-контроля остаточных знаний студентов.
10. Разработка баз тестов для магистерских программ.
11. Разработка оценочных материалов по направлениям подготовки экономики и менеджмента совместно с УМО ГУ-ВШЭ с привлечением тестовых материалов вузов - участников Учебно-методического объединения.
12. Разработка оценочных материалов для программ второго высшего и дополнительного профессионального образования[3]
.
13. Организация подготовки к аттестации ОПП ГУ-ВШЭ для тестовой экспертизы Центра Тестирования высшего профессионального образования при Министерстве образования и науки РФ в рамках самообследования факультетов.
14. Организация интернет-тестирования на сайте «Система тестирования» на портале ГУ-ВШЭ.
15. Организация системы компьютерного тестирования как постоянно действующего компонента учебного процесса и основного инструмента мониторинга качества образовательного процесса.
[1]
Основные образовательные программы высшего профессионального образования реализуемые в сокращенные сроки.
[2]
Тезаурус – список понятий и утверждений по учебному курсу, проверяемых в тестах. Иерархически сформированная понятийная структура курса.
[3]
Основные образовательные программы высшего профессионального образования реализуемые в сокращенные сроки