Методы экспертных оценок
Методы экспертных оценок
В процессе сбора информации могут возникать какие-либо погрешности, поэтому специалисты в области экспертных методов большое внимание уделяют разработке правил подготовки и проведения экспертиз.
Для подготовки экспертизы должна быть сформирована группа специалистов-организаторов, она обеспечивает условия для эффективной деятельности, разрабатывает процедуру экспертизы.
В задачу группы входят:
a. постановка проблемы, определение целей и задач экспертизы, ее основных этапов;
b. разработка процедуры экспертизы;
c. отбор экспертов;
d. проведение опроса;
Рекомендуемые материалы
e. формализация полученной информации, ее обработка и анализ.
Численность группы не должна быть малой, иначе теряется смысл экспертных оценок.
Перед экспертным опросом должны быть разработаны правила его проведения и организации. Они обеспечивают соблюдение условий благоприятствующих формированию экспертами объективного мнения.
К таким условиям относятся:
· независимость формирования экспертами собственного мнения об оцениваемых событиях;
· сохранение анонимности ответов;
· возможность коллективного обсуждения оцениваемого события;
· предоставление экспертам требуемой информации.
Подготовку экспертизы начинают с постановки проблемы. Здесь знакомятся с предысторией и состоянием проблемы. После этого проводится анализ проблемы, для этого организаторы экспертизы выдвигают центральный вопрос, который составляет существо проблемы, а затем расщепляют его на подвопросы.
Методы опроса:
· индивидуальный или коллективный;
· личный или заочный;
· устный или письменный.
В основе любого опроса лежит вопросник, с помощью которого и осуществляется сбор требуемой информации.
Данные, полученные от экспертов, можно разделить на:
· жесткие - если результаты измерения можно оценить с помощью физических или денежных единиц;
· мягкие - когда используются качественные оценки или суждения.
Опрос – метод сбора первичных данных от самого индивида или группы людей. По форме и условиям общения исследователя с респондентом различают письменный (анкетирование) и устный (интервьюирование) опросы.
Главное различие между анкетированием и интервьюированием состоит в форме контакта исследователя и опрашиваемого. Причём при анкетировании их общение опосредуется анкетой, где фиксируются ответы респондентов. Содержащиеся в ней вопросы и их смысл респондент интерпретирует самостоятельно, в пределах имеющихся у него знаний.
Он формулирует ответ и фиксирует его в анкете тем способом, который либо указан в тексте анкеты, либо объяснен анкетером. При интервьюировании контакт между исследователем и респондентом осуществляется при помощи интервьюера, который задает вопросы, предусмотренные исследователем, организует и направляет беседу с каждым отдельным человеком, фиксируя полученные ответы согласно инструкции в бланке интервью. Специфика интервью заключается в целенаправленности процесса общения интервьюера с респондентом согласно программе исследования.
Опрос, при котором общение между исследователем и респондентом, являющимся необходимым источником информации, опосредуется анкетой. В то время как при изучении качества, полученной информации приоритет имеет интервьюирование – разновидность метода опроса, основанная на вербальном социально-психологическом взаимодействии интервьюера и респондента в соответствии с поставленной целью. Это обусловлено во многом преимуществами и ограничениями анкетного опроса и интервью.
Сравним их ниже (табл.5.3.1.).
Таблица 5.3.1.
Основные преимущества анкетирования и интервьюирования
Преимущества анкетирования | Преимущества интервьюирования |
Анкетный опрос дает массовую представительную картину об изучаемом объекте (интервью из-за дороговизны и требований высокой квалификации интервьюеров не может быть рассчитано на большую выборку).
| Когда применяется интервью, возникает уверенность, что на вопросы отвечает именно та личность, которая определена требованиями выборки (это особенно важно для изучения семьи, где в случае применения раздаточной анкеты вместо подростка могут отвечать родители, а вместо мужа жена). |
Отсутствие интервьюера формирует у опрашиваемого ощущение большей анонимности и приводит к более обоснованным ответам. | Личный контакт интервьюера обеспечивает получение ответов на все вопросы, в то время как при анкетировании возможны пропуски вопросов. |
С помощью анкетирования можно собрать информацию за более короткий срок.
| Общение интервьюера с респондентом обеспечивает более серьезное отношение опрашиваемого к опросу. |
Заполнение анкеты происходит, как правило, в менее напряженной обстановке, чем интервьюирование, респондент сам подбирает для себя наиболее подходящее время и скорость заполнения анкеты. | При использовании интервью устраняется проблема незапланированной последовательности ответов на предлагаемые вопросы (что возможно в анкете). |
На респондента не оказывает влияние ≪эффект интервьюера≫, его социально-демографические и личные характеристики. | В интервью может быть создана более откровенная неформальная обстановка и атмосфера доверия. |
Анкетирование может быть проведено кадрами, не обладающими высокой квалификацией. | Интервью позволяет осуществлять наблюдение за поведением опрашиваемого.
|
Мы рассмотрели основные преимущества анкетирования и интервьюирования. Теперь перейдем к рассмотрению их основных ограничений (табл.5.3.2.)
Таблица 5.3.2.
Основные ограничения анкетирования и интервьюирования
Ограничения анкетирования | Ограничения интервьюирования |
Применение анкетирования не позволяет получить глубинную информацию о мнениях, мотивах и ценностях респондентов, что в целом понижает надежность и качество получаемой информации. | Применение интервью требует больших временных и финансовых затрат, затрат на обучение интервьюеров и контроль за качеством их работы.
|
При анкетировании на качество получаемой информации в большой степени может повлиять незаинтересованность респондента в анкетном опросе, так как иногда отсутствует прямое стимулирование к ответам на вопросы анкеты в виде материального вознаграждения, подарка и т.п. | При интервьюировании на качество получаемой информации в большей степени, чем при анкетировании, может повлиять обстановка интервью (поле интервьюирования: место проведения, время проведения и длительность проведения).
|
В рамках анкетного опроса сложно различить в сознании респондента ≪зону компетентности≫ (совокупность представлений опрашиваемого, сформировавшихся под непосредственным влиянием практической деятельности и личного опыта) и ≪зону некомпетентности≫ (совокупность представлений о предметах, не знакомых респонденту по личному опыту и сформировавшихся под влиянием СМИ и контактов с другими людьми). | В рамках интервью на качество получаемой социологической информации в большей степени, чем при анкетировании, может повлиять неискренность респондента (несоответствие выражаемых им мыслей и мнений его истинным взглядам), что может иметь как сознательный, защитный характер (боязнь не понравиться интервьюеру), так и бессознательный (утомляемость, забывчивость и прочее) характер.
|
При анкетировании отсутствует возможность наблюдения за реакциями респондентов в ходе опроса, что не позволяет воздействовать на них определенным образом и не обеспечивает полное заполнение всей анкеты. | Индивидуальные качества интервьюера могут повлиять на процесс получения информации (такое влияние называется ≪эффект интервьюера≫).
|
Интервью в отличие от анкетного опроса обладает своими особенностями:
- целенаправленностью процесса общения интервьюера с респондентом согласно программе социологического исследования;
- обеспечением интервьюером психологического контакта с респондентом и в случае необходимости коррекции процесса опроса;
- близостью интервью по форме к обыденному разговору (интервью способствует непринужденности и, вместе с тем, снимает психологические барьеры или предубежденность, вызывающие нежелание участвовать в опросе или уклонение от ответов на отдельные вопросы).
В зависимости от степени свободы интервьюера и респондента выделяют три вида интервью:
- стандартизированное (формализованное, несвободное) интервью;
- нестандартизированное (неформализованное, свободное) интервью;
- полустандартизированное (полусвободное) интервью.
1.Стандартизированное интервью (от англ. interview – встреча, беседа) – это вид интервью, которое проводится по строго регламентированному и детально разработанному вопроснику и инструкции, предназначенной для интервьюера. Его применение позволяет собрать информацию о моделях поведения, скрытой мотивации, обусловливающих разное отношение к качеству информации личностей.
Существует два вида стандартизированного интервью:
- стандартизированное интервью с закрытыми вопросами;
- стандартизированное интервью с открытыми вопросами. Интервью с открытыми вопросами является самым распространенным видом интервью. С его помощью можно исследовать качество информации различных социальных групп и особенности влияния их жизнедеятельности на социальные процессы.
2.Нестандартизированное интервью - это вид интервью, которое характеризуется минимальной стандартизацией поведения интервьюера и опрашиваемого. В плане интервью перечисляются лишь основные направления беседы с респондентом. Формулировка и последовательность вопросов складывается в процессе интервью.
Такой вид интервью наиболее часто используется при опросах экспертов, где субъективные экспертные показатели измеряются высококвалифицированными специалистами в предметной области путём экспертных оценок. Применение такого интервью позволяет определять значения качественных описаний показателей качества на основе решения, принимаемого группой специалистов – экспертов при решении проблем с неполной или противоречивой информацией, где много исходных данных и их связей, не поддающихся алгоритмизации.
3.Полустандартизированное интервью - это вид интервью, которое проводится интервьюером по общему плану интервью и по заранее заданному набору вопросов, которые он должен задать респонденту. Однако, интервьюер может в зависимости от хода беседы изменить форму вопросов и их последовательность, а респондент свободен в форме ответов.
Применение полустандартизированного интервью позволяет исследователям узнать о важнейших проблемах личности в современном социуме в аспекте её влияния на властные и финансовые структуры государства.
В зависимости от способа доставки анкет к респонденту выделяют четыре основных вида анкетного опроса:
- раздаточный анкетный опрос;
- почтовый анкетный опрос;
- прессовый анкетный опрос;
- телефонный анкетный опрос.
1.Раздаточный анкетный опрос – это вид анкетного опроса, который проводится по месту нахождения отвечающего посредством непосредственного общения с ним. Такой вид анкетного опроса в профессиональной среде ещё называют ≪фэйс-ту-фэйс≫ опрос (“fase-to-fase”). При таком виде анкетного опроса анкетёр отдаёт анкету из рук в руки. По численности респондентов различают два вида раздаточного анкетного опроса: индивидуальный раздаточный анкетный опрос и групповой раздаточный анкетный опрос.
a) Индивидуальный раздаточный анкетный опрос – это вид раздаточного анкетного опроса, который проводится по месту нахождения единственного отвечающего посредством непосредственного общения с ним с помощью анкеты. Он может применяться для исследования влияния отдельных граждан на продукцию фирмы, всевозможные события общества.
В зависимости от места проведения выделяют три вида индивидуального раздаточного анкетного опроса: квартирный опрос, производственный анкетный опрос и уличный анкетный опрос.
• Квартирный индивидуальный раздаточный анкетный опрос – это вид индивидуального раздаточного анкетного опроса, который проводится по месту жительства опрашиваемого (респондента).
• Производственный индивидуальный раздаточный анкетный опрос – это вид индивидуального раздаточного анкетного опроса, который проводится по месту работы опрашиваемого. Такой вид опроса позволяет собирать информацию относительно изучения влияния производственных факторов.
• Уличный индивидуальный раздаточный анкетный опрос – это вид индивидуального раздаточного анкетного опроса, когда поиск отвечающего и опрос проходит на улице. Такой вид анкетного опроса позволяет собирать информацию о восприятии населением животрепещущих проблем российского общества: ЖКХ, собственность на землю, охрана окружающей среды и рациональное, в интересах людей, использование природных богатств и т.д.
b) Групповой раздаточный анкетный опрос (групповое анкетирование) – это единовременное индивидуальное анкетирование респондентов, собранных в одном помещении. Его преимущества заключаются в следующем: большая экономичность ресурсов: временные, человеческие, финансовые ресурсы, оперативность. Ограничения связаны со сложностью организации опроса, т.к. требует тщательной организации (времени, помещения, подготовки респондентов и др.), психологическими особенностями группового раздаточного анкетного опроса (эффект группового давления и проч.).
В групповом раздаточном анкетном опросе величина группы не должна превышать 20 человек, так как группа должна быть обозрима и доступна для индивидуальных консультаций.
2.Почтовый анкетный опрос – это вид анкетного опроса, при котором анкета рассылается по адресам специально отобранных лиц, представляющих всю генеральную совокупность. Особенность почтового анкетного опроса заключается в том, что он не раздается из рук в руки, то есть, отсутствует социолог. Поскольку почтовый анкетный опрос является заочным видом опроса его можно использовать для сбора информации, например, о влиянии внутрироссийских проблем, связанных с качеством жизни, на имидж государства в международном аспекте.
3.Прессовый анкетный опрос – это вид анкетного опроса, при котором анкета печатается в периодической печати (газете или журнале). Иногда прессовый анкетный опрос называют разновидностью почтового анкетного опроса. Существует два вида прессового анкетного опроса.
- В первом случае редакция газеты или журнала обращается к анкетированию с целью получения данных о своих читателях и их мнений по поводу работы данного печатного органа.
- Во втором случае через печатный орган изучается мнение по какой-либо актуальной проблеме. В данном случае, возможно собирать информацию о мнении россиян о различных проблемах жизнедеятельности российского общества, влияющих на формировании позитивного имиджа государства с помощью общественного мнения.
Пример. АНКЕТА (опрос женщин, посетительниц косметического салона, связанного с качеством обслуживания)
1.Ф.И.О. ____________________________________________
2.Адрес:____________________________________________
3.Ваш возраст:
□ от 14 до 18 лет
□ от 19 до 25 лет
□ от 26 до 35 лет
□ от36 до 45 лет
□ старше 46 лет
4.Социальное положение:
□ служащая
□ школьница
□ студентка
□ домохозяйка
5.Образование:
□ начальное
□ среднее(полное)
□ среднеспециальное
□ высшее
6.Довольны ли Вы проведением презентации:
□ Да
□ Нет
7.Хотели бы Вы, чтобы подобные мероприятия проводились чаще:
□ Да
□ Нет
8.Достаточно ли информации, Вы получили, о новой продукции:
□ Да
□ Нет
□ Не совсем
9.Ф.И.О. Вашего Консультанта:____________________________
10.Довольны ли Вы обслуживанием своего Консультанта:
□ Да
□ Нет
11.Какие, на Ваш взгляд, аспекты в работе Консультанта нуждаются в
совершенствовании:
□ Знание продукции
□ Отмечены недостатки в проведении класса
□ Пунктуальность
□ Внешний вид Консультанта «желает быть лучшим»
□ Система звонков:
□ хотелось бы слышать консультанта чаще;
Рекомендация для Вас - 19.1 Жизненный путь и основные работы.
□ хотелось бы слышать реже.
12.Ваши пожелания и рекомендации:________________________
4.Телефонный анкетный опрос – это вид анкетного опроса, при котором содержание анкеты доводится до респондента в устной форме с помощью тех или иных каналов информации. Канал информации: телефон/Интернет.
Обобщая, отметим, что интервью как и анкетирование, может проводиться по месту жительства, работы, учебы отвечающего. Последние годы социологи проводят ≪случайные≫ интервью в театрах, концертных залах, кинотеатрах, музеях, магазинах, кафе и т.д. В социологическом исследовании интервьюирование и анкетирование дополняют друг друга.
Выбор метода зависит от конкретных целей и задач исследования, а также от его организационных возможностей и условий.