Орлов А.И. Менеджмент (2003) (1142166), страница 67
Текст из файла (страница 67)
Можно уменьшить расходы, вводя в экспертизу не всехэкспертов сразу, а постепенно. Так, например, если цель состоит в сбореаргументов "за" и "против", то первоначальный перечень аргументов может бытьсоставлен одним экспертом. Второй добавит к нему свои аргументы. Суммарныйматериал поступит к первому и третьему, которые внесут свои аргументы иконтраргументы.
И так далее - добавляется по одному эксперту на каждый новыйтур. Наибольшие сложности вызывают процедуры с заранее неопределеннымчислом туров, например, "снежный ком". Часто задают максимально возможноечисло туров, и тогда неопределенность сводится к тому, придется ли проводитьэто максимальное число туров или удастся ограничиться меньшим числом.ТРЕТЬЕ ОСНОВАНИЕ КЛАССИФИКАЦИИ ЭКСПЕРТНЫХ ПРОЦЕДУР- ОРГАНИЗАЦИЯ ОБЩЕНИЯ ЭКСПЕРТОВ. Рассмотрим достоинства инедостатки каждого из элементов шкалы: отсутствие общения - заочноеанонимное общение - заочное общение без анонимности - очное общение сограничениями - очное общение без ограничений. При отсутствии общенияэксперт высказывает свое мнение, ничего не зная о других экспертах и об ихмнениях. Он полностью независим, что и хорошо, и плохо.
Обычно такаяситуация соответствует однотуровой экспертизе. Заочное анонимное общение,например, как в методе Дельфи, означает, что эксперт знакомится с мнениями иаргументами других экспертов, но не знает, кто именно высказал то или иноеположение. Следовательно, в экспертизе должно быть предусмотрено хотя бы дватура. Заочное общение без анонимности соответствует, например, общению поИнтернету. Все варианты заочной экспертизы хороши тем, что нетнеобходимости собирать экспертов вместе, следовательно, находить для этогоудобное время и место.
При очных экспертизах эксперты говорят, а не пишут, какпри заочных, и потому успевают за то же время сказать существенно больше.Очная экспертиза с ограничениями весьма распространена. Это - собрание,идущее по фиксированному регламенту. Примером является военный совет вимператорской русской армии, когда эксперты (офицеры и генералы)высказывались в порядке от младшего (по чину и должности) к старшему.Наконец, очная экспертиза без ограничений - это свободная дискуссия.
Все очныеэкспертизы имеют недостатки, связанные с возможностями отрицательноговлияния на их проведение социально-психологических свойств и клановых(партийных)пристрастийучастников,атакженеравенстваихпрофессионального, должностного, научного статусов. Представьте себе, чтособерутся вместе 5 лейтенантов и 3 генерала. Независимо от того, какаяинформация имеется у того или иного участника встречи, ход ее предсказатьнетрудно: генералы будут говорить, а лейтенанты - помалкивать.КОМБИНАЦИЯ РАЗЛИЧНЫХ ВИДОВ ЭКСПЕРТИЗЫ. Реальныеэкспертизы часто представляют собой комбинации различных описанных вышетипов экспертиз.
В качестве примера рассмотрим защиту студентом дипломногопроекта. Сначала идет многотуровая очная экспертиза, проводимая научнымруководителем и консультантами, в результате студент подготавливает проект кзащите. Затем два эксперта работают заочно - это автор отзыва стороннейорганизации и заведующий кафедрой, допускающий работу к защите. Обратитевнимание на различие задач этих экспертов и объемов выполняемой ими работы один пишет подробный отзыв, второй росписью на титульном листе проектаразрешает его защиту.
Наконец - очная экспертиза без ограничений (для членовгосударственной аттестационной комиссии). Дипломный проект оцениваетсяколлегиально, по большинству голосов, при этом один из экспертов (научныйруководитель) знает работу подробно, а остальные - в основном лишь по докладу.Таким образом, имеем сочетание многотуровой и однотуровой, заочных и очныхэкспертиз.
Подобные сочетания характерны для многих реально проводящихсяэкспертиз.3.4.5. Современная теория измерений и экспертные оценкиДля дальнейшего более углубленного рассмотрения проблемэкспертных оценок понадобятся некоторые понятия так называемойрепрезентативной теории измерений, служащей основой теории экспертныхоценок, прежде всего той ее части, которая связана с анализом заключенийэкспертов, выраженных в качественном (а не в количественном) виде.Мнения экспертов часто выражены в порядковой шкале (подробнеео шкалах говорится ниже), т.е. эксперт может сказать (и обосновать), что одинпоказатель качества продукции более важен, чем другой, первый технологическийобъект более опасен, чем второй, и т.д.
Но он не в состоянии сказать, во сколькораз или на сколько более важен, соответственно, более опасен. Экспертов частопросят дать ранжировку (упорядочение) объектов экспертизы, т.е. расположитьих в порядке возрастания (или убывания) интенсивности интересующейорганизаторов экспертизы характеристики. Ранг - это номер (объекта экспертизы)в упорядоченном ряду. Формально ранги выражаются числами 1, 2, 3, ..., но сэтими числами нельзя делать привычные арифметические операции. Например,хотя 1 + 2 = 3, но нельзя утверждать, что для объекта, стоящем на третьем месте вупорядочении, интенсивность изучаемой характеристики равна суммеинтенсивностей объектов с рангами 1 и 2. Так, один из видов экспертногооценивания - оценки учащихся.
Вряд ли кто-либо будет утверждать, что знанияотличника равны сумме знаний двоечника и троечника (хотя 5 = 2 + 3), хорошистсоответствует двум двоечникам (2 + 2 = 4), а между отличником и троечникомтакая же разница, как между хорошистом и двоечником (5 - 3 = 4 - 2). Поэтомуочевидно, что для анализа подобного рода качественных данных необходима невсем известная арифметика, а другая теория, дающая базу для разработки,изучения и применения конкретных методов расчета. Это и есть РТИ.
Надо иметьв виду, что в настоящее время термин "теория измерений" применяется дляобозначения целого ряда научных дисциплин: классической метрологии, РТИ,некоторых других направлений, например, алгоритмической теории измерений.Сначала РТИ развивалась как теория психофизических измерений.Основоположник РТИ американский психолог С.С. Стивенс основное вниманиеуделял шкалам измерения. Характерен следующий этап развития РТИ. Один изтомов выпущенной в США в 1950-х годах "Энциклопедии психологических наук"назывался "Психологические измерения". Значит, составители этого томарасширили сферу применения РТИ с психофизики на психологию в целом. А восновной статье в этом сборнике под названием, обратите внимание, "Основытеории измерений", изложение шло на абстрактно-математическом уровне, безпривязки к какой-либо конкретной области применения. В этой статье упор былсделан на "гомоморфизмах эмпирических систем с отношениями в числовые" (вэти математические термины здесь вдаваться нет необходимости),иматематическая сложность возросла по сравнению с работами С.С.
Стивенса.Уже в одной из первых отечественных статей по РТИ (конец 1960-хгодов) было установлено, что баллы, присваиваемые экспертами при оценкеобъектов экспертизы, как правило, измерены в порядковой шкале. Отечественныеработы, появившиеся в начале 1970-хгодов, привели к существенномурасширению области использования РТИ. Ее применяли к педагогическойквалиметрии (измерению качества знаний учащихся), в системныхисследованиях, в различных задачах теории экспертных оценок, дляагрегированияпоказателейкачествапродукции,всоциологическихисследованиях, и др.В качестве двух основных проблем РТИ наряду с установлениемтипа шкалы был выдвинут поиск алгоритмов анализа данных, результат работыкоторых не меняется при любом допустимом преобразовании шкалы (т.е.является инвариантным относительно этого преобразования).Основные шкалы измерения.
В соответствии с РТИ при математическоммоделировании реального явления или процесса следует прежде всего установить,в каких типах шкал измерены те или иные переменные. Тип шкалы задает группудопустимыхпреобразований. Допустимые преобразования не меняютсоотношений между объектами измерения. Например, при измерении длиныпереход отаршин к метрам не меняет соотношений между длинамирассматриваемых объектов - если первый объект длиннее второго, то это будетустановлено и при измерении в аршинах, и при измерении в метрах.Укажем основные виды шкал измерения и соответствующиегруппы допустимых преобразований. В шкале наименований (другое название номинальной шкалы) допустимыми являются всевзаимно-однозначныепреобразования. В этой шкале числа используются лишь как метки.
Примерно также, как при сдаче белья в прачечную, т.е. лишь для различения объектов. В шкаленаименований измерены, например, номера телефонов, автомашин, паспортов,студенческих билетов. Пол людей тоже измерен в шкале наименований, результатизмерения принимает два значения - мужской, женский. Раса, национальность,цвет глаз, волос - номинальные признаки. Номера букв в алфавите - тожеизмерения в шкале наименований. Никому в здравом уме не придет в головускладывать или умножать номера телефонов, такие операции не имеют смысла.Сравнивать буквы и говорить, например, что буква П лучше буквы С, также никтоне будет.
Единственное, для чего годятся измерения в шкале наименований - эторазличать объекты. Во многих случаях только это от них и требуется. Например,шкафчики в раздевалках для взрослых различают по номерам, т.е. числам, а вдетских садах используют рисунки, поскольку дети еще не знают чисел.В порядковой шкале числа используются для установления порядка междуобъектами. Простейшим примером являются оценки знаний учащихся.Символично, что в средней школе применяются оценки 2, 3, 4, 5, а в высшейровно тот же смысл выражается словесно - неудовлетворительно,удовлетворительно, хорошо, отлично. Этим подчеркивается "нечисловой"характер оценок знаний учащихся.
![](https://s.studizba.com/z.php?f=/templates/si/i/noavatar.png&w=100&h=100&t=1"){kind=avatar}
