Экспертный опрос в социологическом исследовании

Метод Дельфи назван в честь дельфийского оракула в Древней Греции. Он разработан Олафом Хельмером, видным математиком  из корпорации “РЭНД”, и его коллегами  и вероятно поэтому, по сравнению  с другими творческими подходами, дает достаточную точность прогноза.

Метод Дельфи относится к классу количественных методов групповых экспертных оценок. Опрос экспертов проводится в 3-4 тура, состоящих из серии анкет, вопросы  конкретизируются от тура к туру. Для  проведения этого метода необходимо также создать аналитическую группу, которая после каждого тура производит статистическую обработку полученной информации.

Прежде  всего, аналитики определяют область  предпочтительных количественных значений объектов.

После такой проверки проводится очередной тур. Процедуру экспертного опроса по методу "Дельфи" можно выделить в несколько этапов.

ЭТАП 1. ФОРМИРОВАНИЕ РАБОЧЕЙ ГРУППЫ

Задача  рабочей группы заключается в  организации процедуры экспертного  опроса.

ЭТАП 2. ФОРМИРОВАНИЕ ЭКСПЕРТНОЙ ГРУППЫ.

В соответствии с методом "Дельфи" группа экспертов  должна включать 10-15 специалистов в  данной области. Компетентность экспертов  определяется путем анкетирования, анализом уровня реферирования (количества ссылок на работы данного специалиста), использованием листов самооценки.

ЭТАП 3. ФОРМУЛИРОВАНИЕ ВОПРОСОВ

Формулировки  вопросов должны быть четкими и однозначно трактуемыми, предполагать однозначные  ответы.

ЭТАП 4. ПРОВЕДЕНИЕ ЭКСПЕРТИЗЫ

Метод "Дельфи" предполагает повторение нескольких шагов проведения опроса.

ЭТАП 5. ПОДВЕДЕНИЕ ИТОГОВ ОПРОСА

Для проведения первого тура экспертам предлагаются вопросы. Ответы должны быть представлены в виде количественных оценок на поставленный вопрос. Ответ должен быть обоснован  экспертом.

Аналитическая группа проводит статистическую обработку полученной от всех экспертов информации. Для этого рассчитывается среднее значение исследуемого параметра, средневзвешенное значение исследуемого параметра, определяется медиана как средний член общего ряда чисел, полученных от экспертов и область доверительности. Область доверительности целесообразнее рассчитывать через показатель квартиль. Значение квартиля равно ј разницы между максимальной и минимальной оценок ряда. Сама область доверительности будет равна как минимальная оценка минус значение квартиля, максимальная оценка плюс значение квартиля.

Эксперты  должны обязательно познакомиться  с результатами и выводами аналитиков, после чего проводится второй (очередной) тур. Эксперты по результатам представленных расчетов могут увидеть, как корреспондируется их мнение с мнением всей группы экспертов. Они могут изменить свои мнения или оставить прежними, но в этом случае выдвинуть контраргументы в свою пользу. При этом строго соблюдается принцип анонимности. Таким образом проводится 2-3 тура. В итоге получаем довольно точную групповую оценку.

При использовании  метода «Дельфи» следует учитывать  следующее:

1. Группы  экспертов должны быть стабильными  и численность их должна удерживаться  в благоразумных рамках.

2. Время  между турами опросов должно быть не более месяца.

3. Вопросы  в анкетах должны быть тщательно  продуманы и четко сформулированы.

4. Число  туров должно быть достаточным,  чтобы обеспечить всех участников  возможностью ознакомиться с  причиной той или иной оценки, а также и для критики этих причин.

5. Должен  проводиться систематический отбор  экспертов.

6. Необходимо  иметь самооценку компетенции  экспертов по рассматриваемым  проблемам.

7. Нужна  формула согласованности оценок, основанная на данных самооценок.

Метод Дельфи применим практически в любой ситуации, требующей прогнозирования, в том числе если для принятия решения недостаточно информации.

Существует  несколько модификаций метода Дельфи, в которых основные принципы организации  экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т.п. Для удобства обработки информации все модификации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.

Но у  него есть недостатки - например, субъективность мнений специалистов, участвующих в  опросе,  он не позволяет сталкивать в споре мнения экспертов и  на него затрачивается много времени.

Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз путем создания автоматизированных систем обработки результатов опроса. Техническая реализация такой системы основана на использовании ЭВМ с внешними терминалами (дисплеями). ЭВМ обеспечивает представление вопросов экспертам (общающимся с ней через их персональные дисплеи), сбор и обработку результатов ответов, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.

Кроме того, некоторые специалисты считают, что «предположение о том, чтобы те, кто резко расходится с мнением большинства, обосновали свою точку зрения, может привести к усилению эффекта приспособления, а не уменьшить его, как это было задумано». Но все же многие ученые утверждают, что метод Дельфи превосходит «обычные» методы прогнозирования, по крайней мере, при разработке краткосрочных прогнозов.

Метод Дельфи впервые был описан в «Докладе об изучении долгосрочного прогнозирования» американской корпорации «Рэнд» в 1964 г. Объектами исследования явились: научные прорывы, рост населения, автоматизация, исследование космоса, возникновение и предотвращение войн, будущие системы оружия. За истекший период круг прогнозируемых процессов с помощью метода Дельфи значительно расширился, но несомненно, что наибольшее применение этот метод нашел в областях, связанных с научно-техническим прогрессом.

В частности, в нашей стране данный метод применялся для определения основных направлений  научных исследований в области  средств вычислительной техники  и прогнозирования их характеристик, для оценки перспектив развития отраслей. В последнем случае с помощью данного метода могут быть решены следующие задачи:

- определение  сроков выполнения работ от  выдачи технического задания  на работу до начала эксплуатации  объекта;

- определение приоритетных направлений развития предприятий отрасли (по технологии производства, важнейшим экономическим характеристикам — объему производства, числу занятых, объемам фондов и т.п.);

- определение  критериев оценок значимости  научных разработок и др. От метода Дельфи по организации работы экспертов принципиально отличается метод, получивший название «мозговой штурм», который также называют методом «мозговой атаки», методом коллективной генерации идей. Этот метод подразумевает получение решения как продукта коллективного творчества специалистов в ходе заседания-сеанса, проводимого по определенным правилам, и последующего анализа его результатов. Его сущность состоит в том, что при обосновании прогноза дифференцированно решаются две задачи:

- генерирование новых идей в отношении возможных вариантов развития процесса;

- анализ  и оценка выдвинутых идей.

Обычно  все специалисты в ходе заседания  разделяются на две группы, состоящие  из одних и тех же или разных представителей так, что одна группа генерирует идеи, а вторая — их анализирует. При этом в ходе заседания запрещается высказывать любые критические оценки ценности идеи; приветствуется выдвижение как можно большего их количества, поскольку предполагается, что вероятность появления действительно ценной идеи повышается с увеличением их общего числа; поощряется свободный обмен мнениями, т.е. высказанные мысли должны подхватываться и развиваться и т.п. Ходом заседания руководит беспристрастный ведущий. Его задача состоит в том, чтобы направлять развитие дискуссии в нужное русло, к достижению заданной цели, не сбиваясь на беседу, соревнование в остроумии и т.п. В то же время он не должен навязывать участникам дискуссии свое мнение, ориентировать их на определенный способ мышления. 

(др. текст ) Преимущества «Метода Дельфи»:

- анонимность  (у экспертов существует возможность  менять свое мнение, не объявляя  об этом публично, не соглашаться  с «авторитетами»). Анонимность метода  «Дельфы» позволяет оградить  специалистов от эмоционального  давления оппонентов и авторитетов.

К тому же обработка  результатов экспертного опроса (анкет, опросных листов) осуществляется по специальным методикам с привлечением математического аппарата, что также  способствует большей конфиденциальности данной методики.

- использование  результатов предыдущего тура;

- возможность  статистической обработки данных;

- позволяет выявить  степень согласованности мнений  экспертов.

Достоинством  метода «Дельфи» является использование  обратной связи в ходе опроса, что  значительно повышает объективность  экспертных оценок.

Недостатки  «Метода Дельфи»: значительные затраты времени на проведение опроса.

Таким образом, метод Дельфи, используя преимущества коллективного обсуждения проблемы, в то же время позволяет исключить  из процесса личностные факторы, не связанные с существом обсуждаемого вопроса (личная симпатия или неприязнь, давление мнений наиболее авторитетных экспертов и т.п.). 

В3: Этапы экспертного опроса:

1. Разработка  концептуальной схемы и программы  исследования.

2. Концептуальная  схема - перечень факторов, оказывающих воздействие на исследуемый объект; имеющиеся гипотезы об их взаимодействии. То обстоятельство, что эксперты являются специалистами, не должно снижать требований к тщательной разработке программных и опросных документов.

3. Разработка исследовательского инструментария.

4. Подбор  экспертов.

5. Организация  работы экспертов.

6. Предъявление  вопросов в устной или письменной  форме.

7. Снабжение  экспертов как необходимой первичной,  так и дополнительной информацией;  информационное обеспечение экспертов – важная сторона деятельности организаторов экспертизы, целесообразно довести до сведения экспертов всю имеющуюся у организаторов опроса информацию по исследуемой проблеме.

Часто программа исследования и особенно его концептуальная схема, доводится до экспертов с целью оптимизации их деятельности. Если эксперт принимает решение или проводит оценивание в условиях дефицита информации, это может негативно повлиять на результаты его деятельности. Следует учитывать также различную лабильность экспертов по отношению к новой для него информации. Время усвоения и оценки новой информации в значительной мере зависит от формы подачи этой информации, в частности от ее доходчивости и компактности.

8. Выработка  экспертами оценок, суждений и  предложений, фиксирующих их мнение.

9. Согласование  этих оценок, если стоит задача  выработки группового решения.

10. Сбор  и обработка результатов.

Основной  инструментарий экспертного опроса – анкета или бланк-интервью, таким образом, процедура опроса может заключаться либо в анкетировании, либо в интервьюировании экспертов.

При его  составлении некоторые технические  и методические приемы, широко используемые в массовых опросах, теряют свое значение при опросе такой специфической  аудитории, как эксперты. Так, например, нет никакой нужды применять в экспертной анкете косвенные или контрольные вопросы, тесты или какие-либо другие приемы, имеющие своей целью выявить «скрытые» позиции респондента.

Более того, использование подобных приемов  может нанести заметный ущерб  качеству экспертной оценки. Эксперт в полном смысле этого слова - активный участник научного исследования, и попытка скрыть от него цель исследования, превратив таким образом в пассивный источник информации, чревато потерей его доверия к организаторам исследования.

Выделяют основные функции экспертного опроса:

- прогноз  тенденций развития явлений и  процессов социальной действительности;

- оценка  степени достоверности данных  массовых опросов.

Программа прогнозного опроса экспертов носит  преимущественно концептуальный характер. В программе, прежде всего, однозначно формулируется подлежащее прогнозу явление, предусматриваются в виде гипотез возможные варианты его исхода.

Процедуры опроса экспертов различаются как  по форме общения с экспертом, так и по способу постановки ему  вопросов. К ним относятся: индивидуальные и групповые, очные и заочные (почтовый опрос, телефонное интервью), открытые и закрытые опросы.

При выборе конкретной процедуры опроса необходимо учитывать не только реальные ограничения  на процесс проведения экспертизы, но и достоинства и недостатки этих процедур. Так, например, очные опросы более предпочтительнее заочных по информативности, так как позволяют исключить возможное неправильное истолкование экспертом вопросов анкеты. Более того, при заочном опросе эксперт вообще может не дать ответа на некоторые вопросы ввиду их непонимания, хотя при очном опросе это затруднение может быть оперативно устранено за счет переформулировок и уточнений поставленных вопросов.