Учебник - общая психодиагностика - 2006 (846296), страница 31
Текст из файла (страница 31)
Наэтапе собственно распознавания происходит отнесение к классамK1,..., Кi, тех объектов, принадлежность которых к классам априорнонеизвестна.Точность распознавания на этапе обучения измеряется полнотойи адекватностью распознавания эталонных объектов. Наряду с понятием «точность» (абсолютная отделимость) иногда удобно использовать понятие относительной отделимости объектов обучающей выборки, принадлежащих к различным классам.
В случае, когда распознавание ведется для двух классов (например, в профориентации - длядифференциального прогноза успешности оптанта в одной из двухпрофессиональных областей), относительную отделимость можно определить какXXmin100 Xmin(3.5.6)где X - точность при обучении (выраженная в процентах), aXmin-минимальная возможная точность обучения (совпадает с долейобъектов в наибольшем классе от общего объема обучающей выборки). На этапе собственно распознавания точность характеризует главным образом репрезентативность обучающей выборки (выборки валидизации).
Чем выше репрезентативность, тем больше совпадают показателе точности на этапах обучения и собственно распознавания.Использование АВО кроме решения задачи распознавания позволяет получить следующую информацию:1. Информационные веса отдельных элементов (параметров)описания объектов. Эти веса измеряются через изменение точностираспознавания при исключении соответствующих параметров из описания эталонных объектов:152 (a j ) ( (a j ))a(3.5.7)где X - точность распознавания при Рj = 1; X( a j ) - точность распознавания при Р. = 0, а а - нормирующий множитель. Информационные веса интерпретируются как мера прогностической важности параметров.2.
Оптимальные значения порогов , т. е. значения , обеспечивающие наивысшую точность распознавания. Эти значения пороговв нашем случае можно .интерпретировать как чувствительность методики; εj - своего рода дифференциальный порог на шкале тестовогопоказателя aj определяющий переход индивида из одной диагностической категории в другую. Пусть на этапе разработки теста (тестовойбатареи) была обследована группа из К человек, про которых известно, что K1 из них относится к одному классу, а К2 - к другому, К =К1 + К2. Выбрав случайным образом из этой группы М (М<<К) многомерных описаний, проводим на них процедуру обучения алгоритма.Точность обучения характеризует валидность теста. После этого применяем процедуру собственно распознавания (по выработанному решающему правилу) для остальных К-М описаний.
В результате этойпроцедуры мы определяем принадлежность респондентов (испытуемых) к этим классам. Сравнивая полученные результаты с эталоннымиданными о принадлежности испытуемых к классам, мы определяемточность самого распознавания. Если эта точность близка к точностиобучения, то наша пилотажная выборка объемом М может быть признана репрезентативной для обучения. Теперь можно переходить к задаче определения информационных весов.* * *Для эффективного использования алгоритмов распознавания поотношению к многомерным тестовым системам (при K>3), как правило, требуется использование компьютера.При решении задач небольших размерностей (по количеству параметров) иногда психолог может быстрее найти решающее правило,применяя собственные способности зрительной системы (очень мощ153ные) к визуально-геометрической группировке объектов.
В пространстве параметров диагностические, классы выглядят как «сгущения», некие «облака» из точек, изображающих испытуемых. В этомслучае при наличии априорной информации о принадлежности индивидов к классам удобно изображать точки из различных классовразными цветами (хуже - квадратиками, кружками, треугольниками). Вэтом случае «решающее правило» легко «увидеть» как некую воображаемую линию (прямую или кривую), разделяющую точки разногоцвета (рис. 17). Точность диагностики в данном случае можно оценитьпо количеству точек, попавших при данном решающем правиле в «чужую» половину пространства параметров.Рис.17. Разделение двух классов объектов (изображеныкружками и треугольниками) в пространстве двух параметровX1, и Х2Точность правила, изображенного на рис. 17, равна:АA10BВ212310 12 2 3 0,6313 14 12 15Здесь в четырехклеточной матрице сопряженности по строкамзадано попадание объекта в один из априорных классов А (треугольники на рис.
17) или В (кружочки на рис. 17), а по столбцам - попадание объектов в один из апостериорных классов, образованных применением решающего правила, - А (слева от критериальной линии) илиВ (справа от критериальной линии). Как указано выше, для статистической оценки точности может быть использован фи-коэффициент,связанный по известной формуле с критерием хи-квадрат.1543.6.
ТРЕБОВАНИЯ К ПСИХОМЕТРИЧЕСКОЙ ПОДГОТОВКЕПСИХОЛОГАДля эффективного развития практической психодиагностики сегодня требуется резкое повышение психометрической культуры всехпсихологов, использующих измерительные психодиагностические методики. Методами рестандартизации теста, простейшими приемамипроверки надежности и валидности должны владеть все психологи.До сего дня сохранилось не вполне оправданное разделение (идаже противопоставление) психологов, считающих себя специалистами в области клинических методов, и психологов, считающих себяспециалистами по тестированию. Но в большинстве реальных практических ситуаций требуется сочетание этих методов. Клинические,диалогические методы необходимы на начальных этапах работы в заданной области для того, чтобы психолог сумел построить ясное содержательное представление о предмете психодиагностики.
Они такженеобходимывособыхспорныхслучаях,требующихиндивиду-ализированного подхода. Но когда от психолога требуется проведениеускоренных, массовых обследований, обращение к некоторым стандартизованным, измерительным методикам становится неизбежным.Здесь требуется психометрическая грамотность в подборе такого родаметодик: нельзя использовать методики, о которых неизвестно, какогорода психометрической отладке они подвергались.Всеобщая психометрическая грамотность психологов не исключает выделения из их среды специалистов особого рода - психологовпсихометристов, профессионально занимающихся психометрическимобеспечением психодиагностики. Поэтому целесообразно привестиздесь два списка нормативных требований - к психологу и к психологу-психометристу.Требования к психологу:1. Психолог должен уметь квалифицированно разбираться с психометрической документацией в методической литературе по психодиагностике, должен знать, какие психометрические характеристикитеста должны указать его разработчики, в какой степени эти психометрические характеристики соответствуют типу теста, с одной стороны, и актуальной задаче, для которой его требуется использовать, с155другой.
Например, в тех случаях, когда требуется использовать тестдля прогноза со значительным упреждением, а сведений о проверкепрогностической валидности не получено, тест не может считаться готовым для решения данной задачи.2. Психолог должен правильно определить, в какой мере известные тестовые нормы по требующейся методике применимы в его ситуации с учетом контингента испытуемых и типа диагностической ситуации, существует ли ситуация «внутрикультурного переноса» и нужна ли рестандартизация тестовых норм. При необходимости психологдолжен уметь самостоятельно практически произвести рестандартизацию, построив и проанализировав распределение тестовых баллов.3.
Психолог должен уметь самостоятельно собирать данные,проводить корреляционную обработку и измерять эмпирическую валидность -эффективность методики по отношению к заданному критерию. При необходимости психолог должен уметь самостоятельно конкретизировать операциональные индикаторы критериальной информации.4. Психолог должен уметь самостоятельно определять появлениеслишком высокой погрешности в результатах, утрату методикой необходимого уровня надежности, при этом проверять свою гипотезустатистически.5.
Психолог обязан вести двойную документацию: все копиипротоколов он должен быть готов передать в головную методическуюорганизацию (научно-академическую или отраслевую) для пополненияобщего банка данных и совершенствования психометрических характеристик методики. Все модификации, вносимые в методику (формулировку инструкции, отдельных вопросов, последовательность предъявления), психолог должен согласовывать с головной методическойорганизацией, так как самодеятельное введение на местах разнообразных частных модификаций влечет за собой утрату психометрической чистоты получаемых результатов, не ускоряет, а замедляетсоздание модификаций, адаптированных к специфическим условиям иобладающихнеобходимымипсихометрическимисвойствами.Тща-тельное соблюдение заданных методических стандартов — необходимый атрибут психометрической культуры психолога.6.
Психолог должен уметь самостоятельно выявлять и измерять156уровень мотивационных искажений, обусловливающих фальсификацию тестовых данных испытуемыми, должен уметь корректно отсеивать недостоверные протоколы, статистически фиксировать достижение приемлемого уровня достоверности для массовых результатов вгрупповой психодиагностике.7. Психолог должен овладевать приемами сложного количественного подсчета косвенных тестовых показателей, а также интегральных показателей, требующих агрегирования многообразной числовой информации. Он должен уметь поставить задачу программисту(или психологу-психометристу) для проведения расчетов на компьютере.Психолог-психометрист должен уметь:1.
Самостоятельно планировать и осуществлять все этапы попсихометрическому конструированию или адаптации психодиагностических методик: проверку надежности и валидности на уровне отдельных пунктов теста, отсев ненадежных и невалидных пунктов, построение и анализ распределения тестовых баллов, составление математических уравнений для прогнозирования или «решающего правила» для распознавания.2. Организовывать хранение и обработку психодиагностическихданных на компьютере, владеть навыками работы на компьютере врамках стандартных операционных систем, знать структуру используемых в психодиагностике баз данных и уметь управлять базами данных.3.
Организовать работу психологов-психодиагностов по ведениюдокументации к используемым методикам, по соблюдению методических стандартов, по сведению и интеграции результатов в общиебанки психодиагностической информации.4. Вести картотеку методик в рамках заданной области (отраслевой психологической службы), тщательно иерархизируя методики поуровню психометрической обеспеченности, вести библиотеку методических материалов и методических рекомендаций по использованиюстандартизованных методик.В заключение отметим, что развивающаяся психодиагностическая практика неизбежно расширит приведенные здесь перечни требований..157ГЛАВА 4 ПСИХОДИАГНОСТИКА ЧЕРТ ЛИЧНОСТИИерархическое многомерное определение черты.