Конструктивистское основание
для тестов, проверяющих навыки и умения в чтении
Гапочка И.К.
В тестовых материалах, входящих в корпус Государственного стандарта по русскому языку как иностранному (РКИ), представлены различные модели субтестов по всем четырем видам речевой деятельности.
В данном случае нас интересует тест «Чтение», который в части, обращенной к тестируемому, представлен текстами для разных видов чтения (изучающего и ознакомительного), инструкциями к выполнению теста и тестовыми заданиями. В части, обращенной к преподава-телю-тестору, определены цель теста, структура и содержание теста, процедура его проведения, обработка и оценка результатов тестирования. Составлению этого теста предшествовали подготовительные процедуры, благодаря которым можно было создать его конструкти
вистское основание.
У конструктивистского основания есть важное следствие: выявляются компоненты, образующие базис модели теста. Все это имеет значение как для тестирующих, так и для разработчика теста. Мы не будем полностью описывать базу знаний, мнений, представлений - все то, что дает необходимую информацию для различных операций при создании теста по чтению.
Исходя из самых общих оснований, образующих базис модели теста, охарактеризуем только некоторые из ее составляющих: стратеги
ческий подход
при создании текстовой базы, определении уровней понимания, а также типов тестовых заданий, оценочных критериев и т.д. Оценка понимания при чтении всегда связана со значительными трудностями, обусловленными сложностью и глубинным характером мыслительных процессов трансформации текстового материала читающим. А в условиях проведения тестового контроля чтения эти трудности еще более усиливаются.
На экзамене мы предлагаем одну и ту же модель теста, хотя и признаем, что не может быть единого и однородного процесса понимания -в разных обстоятельствах (ситуациях) читающий по-разному понимает разные типы текстов. В связи с этим следует оговорить теоретиче
скую и эмпирическую неполноту тестовой проверки чтения на ино
странном языке.
Мы не склонны переоценивать возможности такой формы контроля и по следующим мотивам. С одной стороны, тесты дают возможность судить о полноте/неполноте понимания информации текста при проверке разных видов чтения, особенно тех, при которых можно фиксировать время. С другой стороны, следует отметить ограниченность тестового контроля: не всю нужную информацию текста можно заложить в жесткие рамки тестовых заданий. Кроме того, часто бывает трудно определить однозначно, когда наступает правильное понимание - в процессе чтения, или в процессе выполнения тестовых заданий, или в результате угадывания правильного ответа.
Не все виды чтения допускают проверку тестами. Например, тестовый контроль изучающего чтения, имеющего установку на воспроизведение содержания прочитанного текста, препятствует выявлению заданного результата. Тестовые задания лишь частично могут проверить уровень воспроизведения. Однако названные выше факторы не позволяют полностью отрицать тестовый контроль чтения: существующие модели обучения иноязычной речевой деятельности, в том числе и модели контролей, являются апроксимированными.
Следовательно, ограниченными возможностями тестового вида контроля, как и любого другого вида, можно пренебречь.
Некоторые понятия, используемые в тесте «Чтение», нуждаются в пояснениях. Названные в нем виды - «изучающий» и «ознакомительный» - относятся к чтению как виду учебной деятельности,
направленной на овладение иноязычным материалом, речевыми умениями и навыками и, в первую очередь, самим чтением. Эти виды чтения регламентированы условиями учебного процесса и другими искусственно создаваемыми установками, что отличает их от естественного чтения
-вида речевой деятельности, протекающей в реальных условиях и направленной на понимание текстового материала для реализации профессиональных и интеллектуальных потребностей.
Так, профессионально-ориентированное чтение соотносимо с понятием «информационной потребности».
Процесс профессионально-ориентированного чтения ничем не регламентирован, кроме коммуникативной установки, принятой на себя самим читающим.
В связи с этим целесообразно относиться к обозначенным в тесте видам чтения, как к условным, которые не полностью соотносятся с видами естественного чтения. В Стандарте-Н и тестовых материалах изложены требования, предъявляемые к иностранным учащимся с точки зрения естественного информационного процесса, для которого важен такой критерий, как умение изменять характер чтения в зависимости от модификации коммуникативной задачи.
С учетом особенностей характера информационного чтения рассмотрим некоторые его компоненты.
Скорость чтения.
Установлено, что изменение характера чтения (стратегии) связано с таким техническим фактором, как скорость из
влечения информации из текста.
В установках к выполнению тестовых заданий скорость чтения регламентирована временем: указывается время, за которое испытуемый должен прочитать текст для изучающего чтения объемом в 500 слов, текст для ознакомительного чтения - объемом приблизительно в 1500 слов. В данном случае за самое медленное чтение (изучающее) мы принимаем скорость 50-55 слов/в минуту, а за быстрое чтение (ознакомительное) – скорость 200-220 слов/в минуту. Следует заметить, что скорость чтения специалисты определяют по количеству печатных знаков, прочитанных за один час. Если определять скорость по количеству слов, прочитанных за один час, то надо учитывать, что в разных текстах слова имеют разную длину. Например, в тексте для изучающего чтения количество букв в большинстве слов колеблется от 9 до 17, в тексте для ознакомительного чтения - от 8 до 16. Для большей точности подсчета следовало бы установить различные шкалы для определенния фактической скорости чтения, что оказывается достаточно сложной процедурой.
Мы придерживаемся другой точки зрения. На сертификационный контроль выходят учащиеся с достаточно сформированной техникой чтения, которые оперируют единицами восприятия различной протяженности — от слова до сверхфразового единства. Минимальной еди
ницей является слово, а не отдельные знаки,
поэтому и подсчет скорости чтения целесообразнее определять по количеству слов в тексте. Что касается длины слова, то следует принимать во внимание факт: в профессионально-ориентированных текстах, как правило, используются слова, состоящие из большего количества знаков (от 12 до 17 знаков, и у студентов уже сформирован навык целостного восприятия таких слов.
Теперь о важном показателе уровня технических навыков чтения,
который не вошел в
тест «Чтение», в оценочную шкалу из-за усложненной процедуры фиксации и подсчета в условиях экзамена. Таким показателем является показатель диапазона гибкости
(ДГ) - величина изменения скорости чтения при переходе от медленного (изучающего) к быстрому (ознакомительному) чтению. Показатель ДГ может выступать в числе основных показателей в оценочной шкале или выступать в качестве дополнительного показателя.
Так, исходным показателем ДГ является разность между быстрой и медленной скоростями: 200-220 слов/в минуту - 50 слов/в минуту г
150-170 слов/в минуту. Если испытуемый прочитал текст (объемом в 850 слов) не за 5 минут, которые указаны в тестовом задании, а за 3 минуты, то скорость его чтения составит 270 слов/в минуту, а показатель ДГ возрастет до 225 слов/в минуту, что будет свидетельствовать об уровне техники чтения выше среднего.
Гибкость проявляется не только в выборе определенной скорости чтения, но и в выборе техники чтения. Следовательно, по ДГ тестируемого мы может судить о его технических возможностях.
Характер текстового
материала. Проверку навыков и умений чтения целесообразно проводить на текстовом материале из социально-профессиональной макросферы (Изаренков Д.И., Чонг Зо Нгуен, 1997) (научная, производственно-практическая сферы), научно-публицистического жанра. Примером могут служить тексты, представленные в тесте «Чтение» в медико-биологическом модуле (Типовые тесты ... Профессиональный модуль «Медицина. Биология», 2001):
• «Дефицит двигательной активности»;
• «Вирус гепатита и рак печени»;
в инженерно-техническом модуле «Строительство. Механика» (Типовые тесты ... Профессиональный модуль «Строительство. Механика», 2002):
• «Небоскребы (Проблема строительства высотных зданий)»;
• «Как вернуть нулевой уровень (Проблема технологии поднятия фундамента)»;
в геологическом модуле1
:
• «Уголь XXI века (Перспектива развития энергетических ресурсов)»;
• «Фасциальный анализ - основа палеографических реконструкций (Виды палеографических реконструкций)».
Отбор текстов для проверки чтения в данном случае обусловлен следующим.
В методической литературе, посвященной проблемам чтения, различают три уровня чтения, отличающихся степенью компетенции читающего: минимальный
(элементарный), студенческий
и профессио
нальный
(Коряковцева Н.Ф., 1983). На сертификационном экзамене должен проверяться профессиональный уровень - уровень, достаточный для реализации интеллектуальных, профессиональных потребностей в информации при работе с различного рода литературой. Для профессионального уровня чтения характерно такое качество, как его продуктивность - достижение необходимого результата в оптимальное время с минимальной затратой усилий благодаря способности читающего управлять процессом чтения.
Таким образом, от чтения с узко практической целью в начале II уровня овладения языком иностранные учащиеся должны перейти к чтению в широких познавательных целях, обладая целым спектром коммуникативных и интеллектуальных умений и навыков. Последние и являются объектами тестового контроля в конце курса обучения - на П-ом сертификационном уровне. Текстовой материал для этого контроля целесообразно вывести за пределы учебной макросферы, он должен быть доступным для тестируемых с различными узкими специальностями и соответствовать принципу профессионально-информационной значимости.
Определение количества и распределения информации в
тексте.
Для проверки ознакомительного чтения могут быть использованы не все тексты. Одни тексты не подходят для этой цели из-за их большой информативной плотности (отсутствия избыточности), что не позволяет в них выделить 75 %
информации, допустимой для соответствующего уровня понимания в этом виде чтения. Другие тексты не подходят для тестового контроля из-за высокой информационной избыточности, которая приводит к тому, что читающий, «вылавливая» основную (важную) информацию, переходит на просмотр большей части текста, тем самым изменяя стратегию чтения.
Отсюда в методике обучения чтению сделана попытка выработать
эталон соотношения информативности и избыточности,
обеспечивающий при ознакомительном чтении понимание информации текста, равное 75 %,
определив коэффициент избыточности (Витковская Ж.В., 1975). Определение количественной характеристики понимания того или другого текста позволяет решить вопрос о целесообразности его использования для тестового контроля. Непригодными для этой цели считаются, например, тексты, в которых число уровней развития пре
дикации
близится к 1 или к числу компонентов предикации. Изменение значения количества компонентов развития предикации, охватывающих 75 %
информации (С75
) при переменном числе компонентов развития предикации (Ct
) и уровней (L) в информационной структуре текста можно определить по таблице, предложенной Ж.В.Витковской. Ниже мы предлагаем сокращенный вариант таблицы.
Число компонентов развития предикации (С,) | Количество уровней в информационной структуре (L) | ||||||
1 | 2 | 3 | 4 | 5 | 6 | ||
1 | 1,0 | ||||||
2 | 2,03 | 2,0 | |||||
3 | 2,75 | 2,5 | 2,25
|
||||
4 | 3,5 | 3,12 | 2,75 | 2,3 | |||
5 | 4,5 | 3,8 | 3,35 | 2,9 | 2,45 | ||
__ 6 | 5,0 | 4,5 | 4,0 | 3,5 | 3,0 | 2,5 |
Вычисление по данной таблице значительно облегчает отбор текстов для контроля ознакомительного чтения. Например, при Ct
=6, L=3, C75
=4 следует: в тесты надо заложить в этом случае 4 компонента предикации, что и будет составлять 75 % от всей информации текста. Наиболее «удобными» для контроля являются тексты с числом компонентов развития предикации, равном 4 или 5-6 и с 2-4 ее уровнями в информационной структуре данного текста.
Таким образом, при отборе текстов для тестового контроля ознакомительного чтения целесообразно принимать во внимание названные выше компоненты информационной структуры текста, а не только его объем (количество слов).
Разработчику теста следует составить формальную схему предикации отобранного текста, определив общее число компонентов развития предикации и число уровней в структуре, а затем вычислить по таблице Витковской искомое количество информации в тексте.
Характеристика текстов, предназначенных для тестового контроля
чтения.
Отбор текстов для медленного (изучающего) и быстрого (ознакомительного) чтения необходимо производить с учетом их особенностей.
Так, тексты для медленного (изучающего) чтения должны (быть):
• невелики по объему (= 450-500 слов);
• содержать дозированный объем информации (в пределах оперативной памяти -7+2);
• содержать узкоспециальную и общенаучную терминологию (сопровождающуюся пояснениями);
• относиться к учебно-профессиональной сфере;
• слабо адаптированы.
Тексты для быстрого (ознакомительного) чтения должны (быть):
• значительными по объему (= 850-1000 слов);
• содержать определенное число компонентов развития предикации и количество уровней в информационной структуре текста (см.таблицу выше);
• содержать только общенаучную терминологию;
• относиться к социально-профессиональной макросфере, к жанру научной публицистики;
• интересны по содержанию;
• неадаптированы.
Отбор информации из текстов для тестовых заданий, проверяю
щих уровень владения разными видами чтения.
Отбирать текстовую информацию для тестов можно несколькими способами. Один из них основывается на обозначенной выше процедуре выделения предикатов посредством представления формальной схемы развития предикации, имеющей конечное число составляющих ее компонентов, расположенных на разных уровнях. Необходимая для тестов информация может быть выделена на основе той же таблицы (см. выше).
Другой способ связан с процедурой выделения в тексте горизонтальных и вертикальных тематических линий (Бухбиндер В.А., 1977). Расчлененность текста поперечными пограничными линиями, отделяющими фразовые единства (или их группы) друг от друга, дает представление о горизонтально ориентированных смысловых «сек
циях».
Чем большее количество «секций» по горизонтальным линиям выделено и понято читающим, тем выше уровень его понимания при изучающем чтении.
Продольно развивающиеся линии свидетельствуют о наличии вертикально ориентированных смысловых «секций»,
через которые осуществляется общее движение смысла по текстовому полю. Степень понимания текста при ознакомительном чтении зависит от выделения количества «секций», расположенных на вертикальных линиях (уровней предикации).
Таким образом, используя процедуру выделения тематических линий различной направленности, мы выделяем в тексте информацию для изучающего и ознакомительного видов чтения, которую затем закладываем соответственно в тесты.
Использование принципов вертикального («продольного») и горизонтального («поперечного») расчленения текста позволяет выделить его смысловые вехи, его основные смыслообразующие компоненты.
При разработке тестов для контроля полного и точного основного содержания текста, с сохранением деталей, должна быть использована информация, лежащая как на поперечных, так и на продольных линиях текста. Отсюда тесты для контроля понимания при изучающем чтения отличаются значительно большим количеством типов тестовых заданий и их различной целевой направленностью.
Инструкция к тесту.
Необходимо остановиться на таком структурном компоненте тестового задания, как инструкция.
В инструкции дается установка, от которой зависит прежде всего стратегия (способ) чтения и результат деятельности тестируемого в чтении. Установка может выполнять важную ориентировочно-мотивационную функцию в процессе выполнения теста, если она включает цель - задачи
и цель-результат.
И в этом плане некоторые инструкции в субтесте «Чтение» оказываются недостаточными. Например, в тестовых заданиях есть задания, направленные на обнаружение такого продукта чтения, как умозаключение. Умозаключающие действия возможны, если читающий опирается не только на весь тест, но и на свои фоновые знания. Однако в инструкции, предваряющей текст, не определена цель-результат: совершить умозаключение (определенного вида) в процессе воссоздания сформированной автором мысли. В данном случае тестируемый столкнется с трудностями при выполнении таких заданий, как:
• выявление вида связи между предложениями-суждениями, а соответственно, вида умозаключения;
• восполнение недостающих посылок по сокращенному вариантудедуктивного умозаключения и др.
Обработка и оценка результатов тестирования. В
этот раздел теста (методические инструкции) следует внести некоторые дополнения, которые связаны с таким важным показателем техники чтения, как диапазон гибкости
(ДГ). Для тестора следует предложить две рейтерские таблицы: в первой из них оценивается ДГ у тестируемого, а во второй оцениваются по балльной системе выполненные тестовые задания. Приводим образец первой таблицы.
К выделению уровней понимания текста целесообразно подходить с точки зрения горизонтального и вертикального направления в логико-семантической структуре текста. Чем большее количество блоков по горизонтальному направлению выделено и понято тестируемым, тем выше фактологический уровень понимания. В этом случае можно судить о ши
роте
и полноте понимания.
Чем большее количество блоков по вертикали выделено и понято тестируемым, тем больше глубина понимания
им текста (Серова Т.С., 1988). Концептуальный уровень в первую очередь характеризуется глубиной понимания текста. На основе характеристик понимания и особенностей их проявления необходимо определить все основные и дополнительные факторы понимания для каждого вида чтения.
Владение разными видами чтения является свидетельством зре
лого чтения.
Однако уровень и степень этой зрелости могут быть различными, что и проверяется при тестировании.
Рейтерская таблица 2.
Объекты контроля | №№ заданий теста | Количество баллов | ||
Виды чтения | Уровни понимания | максимальное | полученное тестируемым | |
изучающее | Фактологический Концептуальный | 1-15 16-19 | 50 20 | |
ознакомительное | Концептуальный Интегрирующий | 20-28 29-32 | 46 24 |
|
Итого 140 |
Заданная скорость | Заданный индекс ДГ. Количество баллов | Показатели тестируемого | |||
в изучающем чтении | в ознакомительном чтении | Скорость | Индекс ДГ | ||
в изучающем чтении | в ознакомительном чтении | ||||
50 слов/ в мин. | 200-220 слов/в мин. |
150-170 слов/в мин. = 8 баллов |
Примечание:;
Фактологический уровень понимания
определяется следующими умениями в чтении:
•ориентироваться в главных текстовых референтах;
•вычленять и воспринимать единичные факты;
•выделять смысловые вехи текста;
•определять детали, иллюстрирующие/подтверждающие/пояс
няющие основные положения.
Концептуальный уровень понимания
определяется умениями:
•определять основные положения (суждения) текста;
•выявлять связи между отдельными положениями (суждениями)
текста;
•устанавливать иерархию отдельных положений текста (глав
ное -второстепенное);
•соотносить отдельные части текста друг с другом (факты, от
носящиеся к одной теме/проблеме);
•определять вывод(ы) автора текста;
•определять коммуникативную интенцию автора:
1)
сообщать - констатировать - утверждать;
2)
описывать — оценивать - изображать — реферировать;
3)
объяснять - сравнивать - резюмировать - обобщать
- де
лать выводы;
4)
обосновывать — доказывать - опровергать;
5)
комментировать - аргументировать.
Интегративный уровень понимания
обеспечивается умениями
умозаключающего характера:
•определять характер реализации авторского замысла;
•определять объем предметного содержания текста:
1)
основные суждения;
2)
смысловой пробел (отсутствие информации);
•добавлять информацию к содержащейся в тексте (дополнение к
компрессированному тексту);
•выбирать смысловое решение для умозаключения.
Тестовые задания соответствуют обозначенным в таблице уровням понимания текста. В Типовом тесте по чтению могут проверяться не все названные выше умения, а только те, которые можно проверить на отобранных для этой цели текстах.
Таким образом, интерпретируемые выше методические факты и речевые события позволяют нам говорить о возможности создания конструктивистского основания модели теста. Теоретически осмысленная деятельность по созданию типовых тестов возможна только при условии, если их разработчики располагают широким спектром исходных данных, на основании которых создается модель теста.
Литература
1.Изаренков Д.И., Чонг Зо Нгуен. Сфера общения как лингвометодическая категория. Исчисление сфер общения/Лингвистические и лингводидактические основы обучения РКИ. К 30-летию ФПК. М.: РУДН,1997.
2. Типовые тесты по русскому языку как иностранному. II сертификационный уровень. Профессиональный модуль «Медицина. Биология». М. - СПб.: Златоуст, 2001.
3. Типовые тесты по русскому языку как иностранному. II сертификационный уровень. Профессиональный модуль «Строительство.Механика». М. - СПб.: Златоуст, 2002.
4. Коряковцева Н.Ф. Основные характеристики уровня компетенции зрелого чтеца/Сборник научных трудов МГПИИЯ, М., № 222,1983.
5. Витковская Ж.В. Методические требования к тестам для проверки уровня владения ознакомительным чтением на иностранном языке (неязыковой вуз). АКД, М., 1975.
6. Бухбиндер В.А. Материал для чтения/Очерки методики обучения чтению на иностранных языках. Киев: Вища школа, 1977.
7. Серова Т.С. Психологические и лингводидактические аспекты обучения профессионально-ориентированному иноязычному чтению в вузе. Свердловек: УралГУ, 1988.