113387 (Педагогические тесты. Термины и определения), страница 2

Второй вопрос, определяющий степень научности педагогического контроля, связан с понятием валидности (т.е. пригодности, адекватности) получаемых результатов используемым методом для достижения поставленной цели. В самом деле, знания можно проверять разными методами, но они не все одинаково пригодны для эффективной оценки. Самый пригодный метод и есть наиболее подходящий для получения валидных результатов. Понятие валидности можно попытаться кратко раскрыть в следующих вопросах исследовательского характера:

- есть ли уверенность в том, что предлагаемые в тесте задания находятся в соответствии с изучаемым предметом и полностью его охватывают;

- насколько можно доверять результатам контроля, и каковы аргументы в пользу такого доверия;

- что из себя представляют сами аргументы в пользу того или иного метода контроля, и насколько они сочетаются с научным и здравым смыслом, а также с имеющимся педагогическим опытом;

- является ли выявленный уровень знаний приемлемым с точки зрения цели и качества обучения, и отсюда - не являются ли полученные данные следствием списывания, подсказки и других видов искажений;

- нет ли, среди заданий таких, которые связаны не столько с данной темой, сколько с другой, ранее не изучавшейся. Отсюда - насколько пригодны данные задания для оценки знаний именно no данной теме;

- сколько нужно заданий для получения объективной информации о знаниях студентов;

- какая форма контроля наиболее пригодна для оценки знаний по данному предмету;

- сколько времени требуется для оптимальной организации качественного контроля, и др.

Помимо этого, качественная оценка знаний зависит и от ответа на самый трудный вопрос - что такое знание предмета? Размышление над этим приводит педагога-исследователя к формированию некоторого образа (конструкта), который должен быть присущ всем тем студентам, кого можно отнести к числу знающих данный предмет. Этот образ помогает подобрать соответствующий материал для контроля. Удачное формулирование контрольного задания требует известного опыта. Уже по одному только составу вопросов опытный специалист может оценить валидность (пригодность) теста для выявления знаний. Если последние сформулированы не чётко и они не охватывают все главные разделы программы, можно говорить о невалидности теста по содержанию.

Надежность и валидность являются необходимыми, но не достаточными критериями эффективности результатов педагогического контроля. Помимо них, эффективность во многом зависит от организации контроля, от обеспеченности вуза техническими средствами, ЭВМ, фондами контрольных работ и тестовыми программами и др.

Особое значение для повышения эффективности и научности имеет разработка вопросов методологии и теории педагогического контроля. Если под методологией понимать систему принципов и способов организации теоретической и практической деятельности, а также учение об этой системе, то методологию педагогического контроля можно определить как учение об основных положениях, формах, методах и принципах научного исследования и эффективной организации практики в сфере педагогического контроля. В круг основных методологических проблем входит формулирование главных-идей, целей и задач, определение содержания, сущности и принципов, педагогического контроля.

Наиболее эффективный путь влияния методологии на практику — через разработку теории. Именно в теории преломляются те или иные методологические регулятивы, которые затем помогают превратить практическую работу в научно-практическую со всеми проистекающими отсюда преимуществами. Важно отметить, что формирующаяся сейчас теория педагогического контроля является не столько частной педагогической теорией, сколько междисциплинарной, объединяющей достижения педагогики и психологии с до­стижениями теории измерения, статистики, математики, теории организации и управления.

Принципы систематичности и всесторонности. Первым из этих принципов подчеркивается важность регулярного контроля за ходом учебно-воспитательного процесса. В отличие от эпизодических проверок систематический контроль помогает упорядочить процесс обучения и воспитания, дает возможность получить достаточное количество оценок, позволяющих вывести в конце года более объективную итоговую оценку. Систематичность контроля тесно связана с его плановостью. Запланированный контроль, ввиду его неотвратимости, обладает заметной мотивирующей силой, он стимулирует активность студентов. При, планировании учитывается необходимость согласования целей и результатов текущего, рубежного, тематического и итогового контроля. Систематические проверки способствуют лучшей реализации диагностической, обучающей, воспитывающей и организующей функций педагогического контроля.

Принцип всесторонности акцентирует внимание на необходимости полного, по возможности, охвата круга вопросов, подлежащих контролю. Напомним, что это, главным образом, вопросы образования, обучения и воспитания. При оценке знаний в первую очередь обращается внимание на проверку усвоения основных тем и разделов, при проверке обученности, на степень усвоения основных навыков и умений, а при проверке результатов воспитательного процесса оцениваются уровень развития морального сознания, ценностные ориентации, потребности, мотивы и интересы.

И, наконец, к педагогическому контролю относятся и вопросы оценки физической подготовленности учеников. В этой области разработана группа тестов, позволяющих оценить уровень развития таких физических качеств и способностей, как сила (различных мышечных групп), быстрота, выносли­вость, способность к координации движений и др. Так, например, одним из самых распространенных средств для оценки выносливости является, так называемый, тест Купера (названный по имени автора), состоящий в том, что исследуемые бегут ровно 12 минут, после чего измеряется дистанция — кто сколько пробежал. Из-за трудностей измерения чаще используется аналог этого теста - бег на полторы мили (1 миля = 1648 м). Оценкой является время пробега.

В дополнение к педагогическому контролю целесообразно использовать методы психологической диагностики. При этом акцент рекомендуется делать не на изучение структуры личности (как это делается сейчас с помощью личностных тестов), а па изучение тех свойств, которые становятся (или должны становиться) предметом профессиональной подготовки. Это такие свойства психики, как внимательность, память, интеллектуальные и творческие способности. Кроме того, время от времени с помощью специальных тестов целесообразно проверять состояние психического здоровья учеников, что позволит вовремя заметить появляющиеся отклонения и принять соответствующие меры.

2. Понятийный аппарат тестологии

Несмотря на частое употребление и кажущуюся ясность, понятия «тест», «тестирование», «тестовые формы диагностики» имеют множество толкований. Более того, существуют вполне значимые различия понятий «педагогический тест», объясняемые языковыми различиями. Как отмечает В.С. Аванесов, понятие «педагогический тест» следует рассматривать в двух существенных смыслах:

• как метод (точнее, форму) педагогического измерения (в этом значении употребляются словосочетания «зачет в форме теста», «тест в середине семестра»);

• как результат применения соответствующего измерения (например, «пройти тест» или «провалить тест»).

С точки зрения А.Г. Бермус, «здесь отсутствует еще одно, самое употребительное значение: тест как совокупность определенных заданий, «текст теста» (ср. «большой тест», «варианты теста» и др.)».

Соответственно этим базовым представлениям о тесте, разными авторами даются разные определения этого понятия.

Тест – это объективное и стандартизированное измерение, легко поддающееся количественной оценке, статистической обработке и сравнительному анализу.

Тест – стандартизированные задания, по результатам выполнения которых, судят о психофизиологических и личностных характеристиках, а также – знаниях, умениях и навыках испытуемого.

Тест – специфический инструмент, состоящий из совокупности заданий или вопросов и проводимый в стандартных условиях, и позволяющий выявить типы поведения, уровень владения какими-либо видами деятельности и др.

Тест – совокупность заданий, правил их применения, оценок за выполнение каждого задания и рекомендаций по интерпретации тестовых результатов.

Тест – это инструмент, состоящий из квалиметрически выверенной системы тестовых заданий, стандартизованной процедуры проведения и заранее спроектированной технологии обработки и анализа результатов, предназначенный для измерения качеств и свойств личности, изменение которых возможно в процессе систематического обучения.

При всех возможных вариациях определения «теста», это понятие включает следующие аспекты:

• во-первых, тест – это метод измерения некоторых ненаблюдаемых впрямую качеств и свойств личности или индивида;

• во-вторых, это метод, характеризующийся высокой степенью объективности, надежности и валидности.

Понятие «педагогическое (учебное) задание» можно определить как средство интеллектуального развития, образования и обучения, способствующее активизации учения, повышению подготовленности учащихся, а также повышению эффективности педагогического труда.

По мнению В.С. Аванесова, задания могут формулироваться в тестовой, и в нетестовой форме. В российском образовании большинство учебных заданий дается учащимся в нетестовой форме. В основном, это вопросы, задачи, упражнения.

Педагогические задания выполняют как обучающие, так и контролирующие функции. Обучающие задания применяют учащиеся для активизации собственного учения, усвоения учебного материала, саморазвития, а также применяют педагоги для обучения учащихся. Все это свидетельствует об обучающем потенциале заданий.

Контролирующие задания применяются, напротив, педагогом или проверяющими органами после окончания учебного года, или другого определенного цикла (четверти), с целью диагностики уровня и структуры подготовленности. Некоторая часть заданий может использоваться для обучения и для контроля.

Существует множество критериев, позволяющих охарактеризовать и, соответственно классифицировать тест. Практическую значимость имеет ряд классификационных признаков.

1. Процедура создания (критерий стандартизации). Все этапы разработки, апробации, использования и обработки результатов стандартизованных тестов регламентируются стандартными процедурами, в то время как нестандартизованные тесты создаются с теми или иными отступлениями от норм. Наиболее характерным примером нестандартизованных тестов являются, так называемые, «преподавательские тесты», разрабатываемые для оперативного контроля усвоения знаний. При всех своих достоинствах (простота в разработке, доступность, дешевизна и др.), нестандартизованные тесты не могут применяться для промежуточной и, тем более, итоговой аттестации учащихся и студентов.

2. Средства и стратегии предъявления тестовых заданий. В соответствии с особенностями профессиональной диагностики в условиях вуза, практическое значение имеют бланковые тесты (для выполнения которых используются специальные бумажные бланки) и компьютерные тесты (проводящиеся с использованием ЭВМ). В свою очередь, компьютерные тесты могут быть трех типов:

• линейные (задания предъявляются в единой последовательности вне зависимости от результатов ответа испытуемого);

• разветвляющиеся (в тесте предусматривается несколько сценариев формулировки заданий, каждый из которых реализуется в зависимости от ответа на определенные «ключевые» задания);

• адаптивные (сложность, порядок и количество предъявленных заданий определяется итогами тестирования в каждый момент).

1. Направленность тестов. Наиболее актуальными в современной диагностике, представляются тесты интеллекта, личностные тесты и тесты достижений. С некоторой долей условности, первые два типа образуют вместе тип «психологического теста», в то время как последний соответствует – «педагогическому тесту».

2. Степень однородности тестов. Как правило, по этому критерию, выделяются три основных типа тестов:

• гомогенные тесты (имеющие одну шкалу оценки и позволяющие линейным образом упорядочить всех испытуемых по степени проявления соответствующего признака);

• гетерогенные тесты (имеющие несколько шкал оценки и позволяющие сформировать многомерное представление о результативности испытуемого в некотором виде деятельности);

• интегративные тесты (в их основе лежат разрабатываемые в последнее десятилетие представления о некоторых универсальных качествах, типа «ключевые компетенции», включающих мотивационные, личностные, интеллектуальные, предметно-практические и иные компоненты).

1. Уровень применимости. По этому критерию различают широкоориентированные тесты (предназначенные для определения количественных характеристик испытуемых по отношению к широкому набору критериев) и узкоориентированные (предназначенные для выявления отдельных достижений и результатов).

2. Цели использования. В соответствии с этим критерием, различаются следующие типы тестов:

• предварительный определяющий тест (тесты остаточных знаний) предназначены для оценки уровня готовности испытуемых к новому образовательному циклу;

• формирующий тест (тесты прогресса) предназначены для совместной диагностики и коррекции основных психологических новообразований (в формирующих тестах обязательно предусматривается ситуативная работа над ошибками, их коррекция и др.);

• диагностический тест (тесты затруднений в обучении) предназначаются для диагностики основных затруднений в обучении;

• суммативный тест (тесты итоговых достижений) разрабатываются и используются на этапе завершения образовательного цикла.

1. Место теста в образовательном процессе. Наиболее типичными категориями тестов являются:

• преподавательские тесты (тесты оперативного контроля знаний, используемые учителем или преподавателем самостоятельно);

• срезовые тесты (используемые для одномоментного получения администрацией образовательного учреждения информации о результатах обученности однородной группы учащихся);

• тесты входной диагностики (используются для психолого-педагоги­ческой диагностики испытуемых и создания на этой основе учебных групп);

• тесты итогового контроля (используются для организации итоговой или промежуточной аттестации учащихся).

В работах В.С. Аванесова выделяются основные элементы тестового задания:

• инструкция (указание испытуемому на то, что он должен сделать, каким образом выполнить задание и отобразить результат);

• текст задания (содержательное наполнение задания; в его структуре могут выделяться стимульный материал или вводная информация, сам вопрос, а также – ограничения ответа);

• варианты ответов (в случае закрытого тестового задания должен быть предложен список вариантов ответа, среди которых обязательно должен быть один – правильный, для открытых тестовых заданий важно наличие некоторого модельного ответа, в соответствии с которым может производиться оценка);

• оценочная схема (способ сопоставления каждому варианту ответа – так называемого «сырого балла», т.е. некоторого количественного значения, определяющего ценность данного задания).

Стоит отметить, что не всегда все 4 элемента тестового задания присутствуют в «развернутом» виде. Довольно часто единая инструкция используется для формулировки множества однотипных заданий; при формулировке открытых тестовых заданий отсутствуют варианты ответов, предлагаемые испытуемым.

В соответствие с разработанной в науке тестовой терминологией, создание теста можно условно разделить на три этапа: составление заданий в тестовой форме, создание тестовых заданий и моделирование теста как системы заданий возрастающей трудности, обеспечивающей качество и эффективность педагогических измерений.

Первым этапом разработки педагогического теста является разработка заданий в тестовой форме. Овладение формой является необходимым, но недостаточным условием для разработки качественного теста. На первом этапе требуется подготовка в области преподаваемого предмета, знание тестовых форм, владение логикой и умение трансформировать фрагменты содержания учебной дисциплины в содержание заданий.

В.С. Аванесов дает следующее определение этому понятию: «задание в тестовой форме является особой единицей контрольного материала. Его можно представить в виде предложения в утвердительной форме с неизвестным. Подстановка правильного ответа превращает задание в истинное высказывание; подстановка же неверного ответа ведет к ложному высказыванию и свидетельствует о незнании студентом данного учебного материала».

К заданиям в тестовой форме тестологи предъявляют следующие формальные требования: