диссертация (1335932), страница 49
Текст из файла (страница 49)
Это относительно новый метод предварительноготестирования инструмента для опроса в сравнительных исследованиях, который снедавнего времени широко используется во многих сравнительных межстрановыхи межкультурных исследованиях241.Метод когнитивных интервью предназначен для изучения мыслительногопроцесса, в ходе которого респондент формулирует ответ. В основе лежит теорияо четырехступенчатой модели ответа на вопросы, которая говорит о том, что приответе на вопрос респондент должен выполнить несколько когнитивных задач –241Miller K. Design and analysis of cognitive interviews for cross national testing // The second Europeansurvey Research Association conference, Prague, 2007; Miller K., Fitzgerald R., Caspar R., Dimov M., GrayM., Nunes D., Padilla J.L., Pruefer P., Schoebi N., Schoua-Glusberg A., Widdop S., Willson S. Design andanalysis of cognitive interviews for cross-national testing/ 3MC Conference, Berlin, 25-28 June 2008.239осознание вопроса, поиск информации, формулировка суждения и представлениеответа.
В ходе когнитивного интервью проводится анализ каждого из этих этапов.Для этого респонденты «думают вслух», говорят обо всем, что им приходит вголову, когда они отвечают на вопрос, стараются объяснить как они пришли ктакому ответу, из каких вариантов выбирали, почему остановились именно наэтом. Метод показал себя эффективным для выявления проблем семантическойнеэквивалентности и отчасти нормативных аспектов эквивалентности.
Кограничениям метода относятся довольно высокие требования к модерированию,большая зависимость результатов от способностей респондентов в саморефлексии.Если первоначально когнитивные интервью применялись для валидацииинструмента для опросав отдельныхстранах, тов последние годыразрабатываются методы и инструменты для проведения таких интервью с цельюсравнительного межстранового анализа.Фокус-группы. При использовании этого метода проводится обсуждениеотдельных понятий, терминов, вопросов или частей анкеты в групповойдискуссии под руководством модератора. Участниками фокус-группы дляпредварительного тестирования анкеты выступают представители целевойгруппы, для которой готовится анкета, или отдельных наиболее важных для целейисследования подгрупп.
Информация от респондентов может сопровождатьсяфиксацией невербального поведения респондентов: настроение участников, паузы,время, когда респонденты начинают отвлекаться, жесты, выражения удивленияили непонимания и т.п. В отличие от когнитивных интервью при использованииэтого метода анализируется не столько процесс индивидуального мышления,сколько сформулированный результат – ответ на вопрос, содержание которогозатем подвергается обсуждению, проверяется семантическое соответствиевопросов изучаемым концепциям.
Достоинства и недостатки этого метода вцелом сходны с методом когнитивных интервью и связаны с проблемойэкстраполяции данных. Другой особенностью является то, что таким методоммогут тестироваться только отдельные элементы инструмента для опроса –240конкретные вопросы, темы, понятия, но не анкета как последовательная цепочкавопросов, созданная для индивидуального восприятия.Количественный претест.
В большинстве сравнительных межстрановыхисследований такой вид претеста применяется либо во всех странах-участницахопроса, либо в нескольких отдельных странах. Содержанием теста может статьанкета как целое, так и ее отдельные части. Выборка для количественногопретеста строится по тем же принципам, что и выборка для основного опроса, ноиногда некоторые группы могут быть представлены диспропорционально дляболее точного и глубокого анализа. Количественный претест может приниматьнесколько разных форм: претест на небольшом количестве респондентов (30, 50,100) или претест на большой выборке (300, 400, 500 респондентов или больше).Различия этих форм не только в количестве опрошенных, но и в типе анализаданных, который можно провести на такой выборке, то есть в целевом назначениитакого претеста.
При проведении претеста на небольшой выборке целью являетсяизучение внешних параметров интервью: длина интервью или отдельных частейинтервью, оценка общего понимания анкеты респондентами, выявлениесистематических ошибок и проблем отдельных вопросов, переходов от вопроса квопросу, проверка полноты списка категорий ответов, учет всех возможностей.
Вслучае проведения количественного претеста на полной выборке появляетсявозможность анализа данных статистическими методами – проверка надежностиработы разных показателей, дискриминирующей возможности разных шкал и т.п.Примером подобного этапа претеста служат и предварительные или «пробные»переписи населения, которые являются стандартной практикой при проведениинациональных переписей и других больших государственных статистическихобследований.Такойпретесттребуетдовольнобольшихвременныхифинансовых затрат. Однако если речь идет о многострановом сравнительномисследовании с использованием совершенно нового инструмента для опроса,такие затраты могут быть необходимыми, так как стоимость ошибки в такихмасштабных проектах очень велика.241Задачи претеста и возможности их реализация с помощью разныхметодов. В ходе претеста на любой стадии разработки инструмента решаютсяодновременно две задачи – проверить соответствие анкеты как набораконкретныхвопросов,задаваемыхвопределеннойпоследовательности,выполняемой функции инструмента для проведения точных измерений (как и влюбом однострановом исследовании), а также проверить, насколько эквивалентнопроисходит измерение в изучаемых единицах – странах или культурах.В идеале в сравнительном межстрановом исследовании предварительноетестирование для решения каждой из задач, описанных в Таблице 3, должно бытьпроведено в каждой стране-участнице сравнительного исследования.
На практикеэто редко оказывается возможным из-за финансовых и временных ограничений,но также из-за дополнительного фактора – перевода, который необходимо делатьмного раз. Если перевод не сделан полностью согласно окончательнымтребованиям и протоколу, то невозможно будет определить, являются лиразличия, проблемы, ошибки, выявленные в ходе претеста, проблемаминеэквивалентности в результате социально-культурной неприемлемости какихлибо вопросов, или проблемами перевода.Таблица 3.
Задачи и методы претестаЗАДАЧА ПРЕДВАРИТЕЛЬНОГОТЕСТИРОВАНИЯМЕТОД ПРОВЕДЕНИЯ ПРЕТЕСТАПРОВЕРКА КОНЦЕПТУАЛЬНОЙЭКВИВАЛЕНТНОСТИ ИКОНЦЕПТУАЛЬНОЙ ВАЛИДНОСТИ,полноты (при учете социально-культурнойспецифики), а также приемлемостииспользования понятия, термина вопроса вопределенной стране, социально-культурныхусловияхЭкспертная оценкаПРОВЕРКА СЕМАНТИЧЕСКОЙВАЛИДНОСТИ И ЭКВИВАЛЕНТНОСТИФокус-группыПРОВЕРКА МЕТРИЧЕСКОЙВАЛИДНОСТИ И ЭКВИВАЛЕНТНОСТИКоличественный претест (возможно на небольшойвыборке, случайной или целевой)Когнитивные интервьюФокус-группыСтатистический анализ количественного претестаКогнитивные интервьюПолный количественный претестПРЕДВАРИТЕЛЬНОЕ ТЕСТИРОВАНИЕОКОНЧАТЕЛЬНОГО ВАРИАНТААНКЕТЫ – процедурная проверкаКоличественный претест (возможно на небольшойвыборке либо на полной выборке дляколичественной оценки параметров)242В Табл.
3 мы выделили четыре основные задачи, которые стоят припроведениипредварительногомежстрановомконцептуальнойопросе:тестированияПроверкавалидности,анкетыконцептуальнойполноты(привсравнительномэквивалентностиучетеисоциально-культурнойспецифики), а также приемлемости использования понятия, термина вопроса вопределенной стране, социально-культурных условиях, проверка семантическойвалидностииэквивалентности,проверкаметрическойвалидностииэквивалентности, предварительное тестирование окончательного варианта анкеты– процедурная проверка.
Все эти задачи не могут быть эффективно решены прииспользовании какого-либо одного метода предварительного тестирования, нотребуют мультимодального многоэтапного подхода.3.4. Измерение социально-демографических и контекстуальных показателей– построение и гармонизацияВ любое сравнительное межстрановое исследование на базе опросавключаются два вида вопросов – «содержательные» вопросы о мнениях,поведении, образе жизни, привычках, установках, ценностях, предпочтениях исоциально-демографические или контекстуальные. Особенностью последнихявляется их назначение – выступать контекстом, основной для отнесенияреспондентов к разным социальным группам с дальнейшей целью сравнения этихгрупппосодержательнымпоказателям.Такиехарактеристикимогутиспользоваться как независимые переменные в моделях, направленных навыявление связей или влияния параметров, характеризующих положениереспондента в обществе, на зависимые переменные – мнения, взгляды, поведение.Контекстуальныеилибазовыедемографическиепеременныесодержатинформацию, которая необходима для определения гомогенности подгрупп,причинных взаимосвязей между установками и социетальными факторами,объяснения различий во мнениях населения, его дисперсности242242.
Социально-Braun M., Mohler P.P. Background variables/ Cross-Cultural Survey Methods, ed. by J.A. Harkness, F.L.van de Viiver and P.P. Mohler. Hoboken NJ: Wiley. - 2003. – P. 101-102.243демографические показатели отличаются от «содержательных» и по методамизмерения в сравнительных межстрановых опросах – особой является логика иэтапность построения таких показателей.На теоретико-методологическом этапе происходит отбор социальнодемографических и контекстуальных показателей, которые включены в гипотезыпроекта.Процессоперационализациилибовообщепропускается,либопроводится методом отбора стандартных показателей. Конкретные индикаторыстроятся в каждой стране отдельно с разными элементами предварительной илипостгармонизации.тестированияэтихЭтапперевода,показателейверификацииобычноипредварительногоисключается.Новозникаетнеобходимость проведения другого этапа – гармонизации, приведения такихпеременных в эквивалентную форму – именно на методический вопрос о том, какименно это можно сделать, мы и будем отвечать дальше.Контекстуальные переменные можно разделить на несколько групп поуровнюагрегированияприизмеренииианализе:а)индивидуальныехарактеристики (возраст, образование, личный доход, семейное положение,профессия, наличие детей, религиозность, членство в организациях); б)характеристики микрогруппы, к которой принадлежит респондент (структурадомохозяйства, доход семьи, социальный статус семьи); в) характеристикимакрогруппы (регион проживания, тип населенного пункта, экономическоеположение региона или страны проживания, политические характеристикинаселенного пункта и региона, характеристика уровня и качества жизни в местепроживания.C.
Садман и Н. Бадбурн выделили 8 классов контекстуальной информации(около 50 вопросов), которые они считают достаточными для глубокого анализаданных опросов населения243. Количество контекстуальных переменных вконкретной анкете связано с типом исследования. В опросах общественногомнения и маркетинговых исследованиях таких переменных обычно включаетсянемного – 10-15. В академических исследованиях контекстуальных переменныхSudman S., Bradburn N. Asking Questions: A practical guide to questionnaire design. –San Francisco:Jossey Bass, 1982.
– 397 p.243244обычно гораздо больше. Например, в ESS к контекстуальным переменным можноотнести 45 вопросов «основной» части анкеты. Еще ряд параметров, такие как типжилья, характеристики окружения жилья фиксируются на уровне отборареспондента в Контактных формах на основе наблюдений интервьюера.Несмотря на довольно высокий уровень стандартизации социальнодемографических и контекстуальных переменных в однострановых опросах, вкаждой стране набор таких показателей разный. Общими измеряемымипоказателями почти во всех странах и во всех типах исследований является пол ивозраст. В однострановых и сравнительных опросах на территории бывшегоСоветского Союза, помимо пола и возраста, обычно включают уровеньобразования, национальность, регион проживания, размер населенного пункта,тип поселения – городское или сельское, иногда доход, социально-экономическийстатус домохозяйства, структура семьи (наличие детей, семейное положение, типсемьи).
![](https://s.studizba.com/z.php?f=/templates/si/i/noavatar.png&w=100&h=100&t=1"){kind=avatar}
