Автореферат (Методы оценивания сформированности иноязычной коммуникативной компетенции студентов-психологов (на материале английского языка)), страница 4

И. Башмакова, И. Ю. Павловская). Показано, что одновременно идут процессы ассоциации при чтении и восприятия при аудировании, что может значительно искажать результаты. Установлено, что другие виды речевой деятельности (например, сформированность умений говорения), задействованные в тесте, влияют на правильность ответа на тестовый вопрос.В результате исследования сделан вывод, что при проведении тестирования уровня сформированности профессионально ориентированной иноязычной коммуникативной компетенции студентов необходимо включать задания, направленные на контроль навыков и умений контактного аудирования, которое является составной частью непосредственного устного взаимодействия коммуникантов.

Дистантное аудирование (прослушивание аудиозаписей или трансляций) в недостаточной степени проверяет те навыки, которыеиспользуются во время профессиональной деятельности специалиста. Поэтому в педагогическом эксперименте контроль уровня сформированностиустной коммуникативной иноязычной компетенции проводился с привлечением не только тестов на дистантное аудирование, но и тестовых заданийс применением контактного аудирования.Поскольку психолингвистической модели естественного речевого поведения отвечает только контактное аудирование, в рамках данной работы применялся прагматический тип тестирования, приближенный к условиям контактного аудирования в ситуациях, как искусственно созданных, так и близкихк естественной среде профессионального общения. Такая концепция соответствует коммуникативному подходу к тестированию аудитивных навыков,когда контроль осуществляется в реальных речевых ситуациях.

В первомслучае использовались тестовые задания, разработанные по принципучетырехтактовых упражнений: «реплика диктора — пауза для ответа — ключ20(корректирующая реплика диктора) — скорректированный ответ студента»(Н. И. Башмакова, И. Ю. Павловская).Наиболее удобным способом проведения контактного аудирования,близкого к условиям профессионального общения является, с нашей точкизрения, проектная работа. В рамках описываемого эксперимента была проведена студенческая конференция, на которой студенты представляли результаты своей проектной работы. Результаты проведенного эксперимента подтвердили, что при обучении языку специальности необходимо включать задания, направленные на контроль контактного аудирования.Предложенный подход к контролю аудирования, при обучении профессионально ориентированному иностранному языку, позволит не только сделать процесс более интересным для студентов, но и повысить объективностьоценки и нивелировать влияние случайных факторов.Отмечается, что оценка за аудирование выставлялась по результатамоценок за промежуточный контроль и проектную работу.

Для контроля уровнясформированности навыков аудирования применялось как дистантное, так иконтактное аудирование. Все виды аудирования применялись во время выполнения как проектной работы, так и тестовых заданий по аудированию. Придистантном аудировании использовались тестовые задания, разработанные наоснове аудиозаписей лекций и тестов по психологии, а также задания, отобранные из FCE, IELTS.В разделе 2.3 «Обработка и интерпретация результатов тестирования» представлены статистические характеристики экспериментального образца теста, составленного из банка тестовых заданий (см. табл.

1).21Таблица 1. Статистические характеристики экспериментального тестаКоличество тестовых вопросов (№ of Items)50Количество тестируемых (№ of Examinees)142Среднее арифметическое (Mean)31.782Дисперсия (Variance)100.368Стандартное отклонение (Std. Dev)10.018Асимметрия (Skew)-0.612Эксцесс (Kurtosis)-0.379Минимальное количество правильных ответов (Minimum)6.000Максимальное количество правильных ответов (Maximum)49.000Медиана (Median)34.000Альфа (Alpha)0.917Погрешность измерения (SEM)2.894Среднее арифметическое пропорции правильных ответов по дихо- 0.636томической шкале (Mean P)Среднее арифметическое точечно-биссериальной корреляции(Mean Item-Tot)0.445Среднее арифметическое биссериальной корреляции (MeanBiserial)0.599Наибольший результат в слабой подгруппе (Max Score (Low))26Количество тестируемых в слабой подгруппе (№ (Low Group))40Наименьший результат в сильной подгруппе (Min Score (High))39Количество тестируемых в сильной подгруппе (№ (High Group))4222Анализ расчетных значений теста в целом, состоящего из субтестов«Чтение», «Практическое использование языкового материала», показал:• Альфа Кронбаха, равная 0.92, свидетельствует о высокой надежности данного теста.• Большой размах между минимальным (6) и максимальным (49) количеством набранных баллов показывает, что данная выборка испытуемых неоднородна по уровню сформированности навыковчтения и использования языкового материала.• Отрицательное значение эксцесса -0.379 свидетельствует о плосковершинном распределении по отношению к нормальному распределению баллов, что объясняется неоднородностью выборкипо уровню владения английским языком.• Отрицательное значение асимметрии свидетельствует о левосторонней асимметрии, то есть мода больше медианы, а медианабольше среднего арифметического.

Смещение медианы (34) посравнению со средним арифметическим (31.78) вправо свидетельствует о том, что в выборке преобладают студенты с более высоким уровнем владения английским языком.• Коэффициент биссериальной корреляции, который показываеткорреляцию между правильным ответом на тестовый вопрос и общим количеством правильных ответов, лежит в пределах 0.22–0.64, со средним арифметическим, равным 0.599, из чего следует,что все дистракторы (альтернативные неверные варианты ответа)подобраны верно и тест в целом валиден, то есть метод измерениясоответствует измеряемому свойству.Приведенные выше характеристики теста свидетельствуют о его высокой валидности.Анализ, проведенный по однопараметрической модели Раша, позволилоценить вероятность правильного ответа в зависимости от уровня подготовленности студента (см.

табл. 2).23Таблица 2. Вероятность правильного ответа в зависимостиот уровня подготовленности студентаУровень владенияКоличество студентованглийским языкомA2B1B2B2C1Вероятностьправильного ответа22222724310.460.420.650.760.76Анализ статистических характеристик показал, что тестовые заданияразделов «Чтение», «Практическое использование языкового материала» обладают высоким уровнем надежности и точности измерений. Это говорито высокой степени достоверности результатов теста по разделам «Чтение»,«Практическое использование языкового материала».Проведен анализ типичных ошибок, допущенных студентами.

На основерезультатов этого анализа сделаны более детальные выводы об уровне сформированности умений тестируемых и даны рекомендации по формированиюразличных умений.В разделе 2.4 «Метод проектов в обучении профессионально ориентированному иноязычному общению как способ контроля сформированностиязыковых и социолингвистических компетенций» проверяется гипотезао том, что метод проектов может быть использован не только как обучающеесредство, но и как средство контроля, текущего или итогового. Суть работынад коллективным проектным заданием как нельзя более точно отражаетсущность профессиональной деятельности ученых-психологов, которая заключается в выполнении разного рода проектов.Высокий процент совпадения оценок за устный экзамен, оценок, поставленных ведущими преподавателями, и оценок, полученных студентом после24совместной конференции, проведенной в рамках данного эксперимента, позволяет сделать вывод о возможности использования метода проектовв качестве способа контроля уровня сформированности устно-речевой коммуникативной и социолингвистической компетенции (см.

рис. 2).80706050экспериментальная группа40контрольная группа3020100совпадениеоценка за ПР нижеоценка за ПРоценок за ПРи УЭчем на УЭвыше чем на УЭРис. 2. Сравнение оценок за проектную работу (ПР) и устный экзамен (УЭ)Рейтинги, полученные студентами экспериментальной группы по результатам экзамена, с небольшим расхождением совпали с рейтингами студентов в группах, полученными по итогам успеваемости, тогда как в контрольной группе в 15% случаев наблюдалось сильное расхождение, болееслабые студенты получили лучшую оценку, чем более сильные.Из вышесказанного следует, что метод проектов является не только эффективным методом обучения языку специальности, но и может быть использован как измерительный инструмент, так как результат оценки выполненияпроектного задания с большой долей вероятности совпадает с результатомитоговой оценки (экзамена).

Коллективный проектный метод может быть рекомендован не только для промежуточного, но и для итогового контроля25уровня сформированности устно-речевой коммуникативной и социолингвистической компетенции студентов-психологов, проходящих обучение английскому языку на факультете психологии.В Заключении отмечается, что в результате разработанного комплексного подхода к оцениванию отдельных составляющих профессионально ориентированной коммуникативной компетенции адекватно оценивается общийуровень сформированности профессионально ориентированной коммуникативной компетенции.Разработанные контрольно-измерительные мероприятия необходимы:• для оценки входного уровня владения иностранным языком и выбора образовательного маршрута;• для промежуточного контроля: a) для оценивания уровня сформированности ПОКК на промежуточном этапе обучения в общем,б) для оценивания отдельных составляющих ПОКК и соответствующей корректировки образовательного маршрута и его наполнения;• для итогового контроля, позволяющего оценить уровень как отдельных составляющих, так и общий уровень сформированностиПОКК.В данной работе тестирование применялось для контроля уровня сформированности языковой компетенции (лексических и грамматических навыков), а также речевой компетенции в говорении, чтении и письме.

Результатытестирования учтены в итоговой оценке уровня сформированности профессионально ориентированной коммуникативной компетенции.Для составления тестов, соответствующих цели тестирования, создана иапробирована база нормированных тестовых заданий, которая была использована при составлении итогового теста для контроля языковых навыкови речевых умений студентов-психологов в рамках профессиональноориентированного обучения иностранному языку. Статистическая обработка26и интерпретация эмпирических результатов, полученных после процедуры тестирования, подтвердили высокий уровень надежности тестовых заданий и теста в целом.Использование метода проектов в рамках данного исследования подтвердило свою высокую эффективность не только как одного из методов обучения, но и как надежного способа контроля уровня сформированности устноречевой коммуникативной компетенции.Доказано, что контроль уровня сформированности речевой компетенциив аудировании студентов-психологов необходимо проводить с учетом наиболее значимых с профессиональной точки зрения видов аудирования, то естьумений дистантного и контактного аудирования.Итоговая отметка при комплексном подходе к оцениванию составляющих ПОКК с применением соответствующих методов складывается изоценки: а) за итоговый тест; б) за коллективную проектную работу;в) портфолио, включая оценку за дистантное и контактное аудирование,и г) оценки за промежуточный контроль.В результате исследований показано, что объективность оценки уровнясформированности ПОКК достигается только при контроле уровня сформированности всех основных составляющих ПОКК адекватными фокусной аудитории методами, в том числе валидными тестами, прошедшими статистическийанализ.Основное содержание диссертации отражено в следующих публикациях:Публикации, включенные в реестр ВАК РФ:1.