Экспертные оценки в исследовании социальных систем

Широкое использование методов экспертных оценок при исследовании социально-экономических и политических процессов обусловлено большим числом возникающих противоречий в системах социально-экономического характера, которые невозможно изучить объективными методами. Методы экспертных оценок способствуют выработке эффективных решений при невозможности использовать моделирование и описание исследуемых объектов формализованными и математическими способами; отсутствии достаточно достоверной информации; информационной неопределенности исследуемых объектов; разработке средне- и долгосрочных прогнозов влияния новых законов и закономерностей на системы управления, тенденций развития управления, рыночной среды; а также при наличии экстремальных ситуаций в управлении. В таких случаях важную роль играет использование профессионального опыта и сформированной на его основе интуиции специалистов-экспертов.[6]

Особое место методов экспертных оценок в исследованиях социально-экономических и политических процессов обусловлено также тем, что при помощи данных методов возможно снижение уровня неопределенности и разрешение проблем в тех случаях, когда их математическая формализация невозможна в силу их новизны и сложности, либо требует больших затрат времени и средств. В первую очередь, при помощи методов экспертных оценок возможна диагностика состояния и прогнозирование вариантов социально-экономических и политических процессов в тех случаях, когда в распоряжении исследователя отсутствуют необходимый объем достоверной информации об объекте; внешняя среда характеризуется высокой степенью неопределенности; исследуемые объекты являются новыми либо подвержены инновациям; когда время или средства не позволяют применить формальные модели исследования.

Область применения метода экспертных оценок весьма широка. Перечислим основные проблемы, разрешаемые методами экспертных оценок: составление перечня событий в различных областях за определенный промежуток времени;

определение целей и задач управления с упорядочением их по степени важности; определение наиболее вероятных интервалов времени появления тех или иных событий; альтернативное распределение ресурсов для решения проблем; планирование управления производством; определение возможных вариантов сложных социально-экономических и политических проектов и программ; научно-техническое и экономическое прогнозирование.

Необходимо учитывать, что на экспертные оценки оказывает влияние уровень научно-технических знаний общества. Позиция специалистов может меняться по мере развития системы и представления о ней. Поэтому при получении информации о сложной проблеме, характеризующейся большой степенью неопределенности, экспертные оценки должны рассматриваться как отображение реалий развития современного общества, как многоразовая процедура, требующая создания регулярной системы работы с экспертами.

Обобщая вышесказанное, мы приходим к следующему выводу: в исследованиях социально-экономических и политических процессов широко применяется неформальный метод экспертных оценок, который понимают как комплекс логических и математико-статистических методов и процедур, направленных на получение от специалистов информации, необходимой для подготовки и выбора рациональных решений.[7]

Общее достоинство методов экспертных оценок – быстрота получения результатов без наличия объемной и безусловно достоверной информативной базы, описывающей исследуемые явления, возможность оценивания того или иного объекта при невозможности измерить его количественными методами. Возможность предвидения будущих состояний исследуемых процессов обеспечивается глубоким знанием экспертами закономерностей развития социально-экономических и политических процессов, практическим опытом, интуицией, способностью к научному наблюдению и умением делать на этой основе заключения и эффективные выводы. Однако методы экспертных оценок носят субъективный характер, поэтому необходимо соблюдать определенный алгоритм их применения, что существенно способно повысить уровень объективности и увеличить эффективность применения методов экспертных оценок в исследованиях социально-экономических и политических процессов.

Глава 2. Основные характеристики методов экспертных оценок

2.1.                     Основные стадии проведения экспертных оценок

Методы экспертных оценок в исследованиях социально-экономических и политических процессов оказывают существенную помощь при разрешении проблем, характеризующихся высокой степенью информационной неопределенности. Однако разрешение таких проблем носит сложный характер, требующий особых знаний и усердия со стороны исследователя. В целях повышения эффективности методов экспертных оценок в исследованиях социально-экономических и политических процессов и снижения их субъективности необходимо применение научно обоснованной организации проведения всех этапов экспертизы, сопряженной с применением количественных методов при организации экспертизы и последующей оценке суждений экспертов.

Экспертные оценки представляют собой поэтапное исследование параметров исследуемого объекта, основанное на принципах организации коллективной мысли с использованием технологии экспертного опроса. Цель экспертных оценок заключается в предварительном тестировании объекта исследования, направленном на выявление в нем внутренних свойств и связей, скрытых от исследователя. Благодаря методам экспертных оценок, в итоге исследования собирается необходимый для вынесения экспертной оценки материал, обеспечивается его соответствие принятым стандартам.

Технология проведения экспертных оценок предполагает прохождение ряда этапов, позволяющих повысить уровень эффективности исследования:

1)  Принятие решения о необходимости проведения экспертной оценки и постановка проблемы.[8]

На данном этапе эксперты знакомятся с ретроспективой и современным состоянием проблемы, рассматривают аргументы в пользу необходимости её решения, обсуждают эти аргументы вместе с руководителями. Основная цель этапа – распознать мнимые проблемы, чтобы не ошибиться при выборе необходимого решения. Наиболее эффективный подход – публичное обсуждение, когда приглашенные квалифицированные специалисты выдвигают сильные аргументы в пользу проблемы, обнаруживают слабые стороны и отвергают неубедительные выводы. Результатом данного этапа является формулировка обоснованной и всесторонне осмысленной проблемы, которую необходимо исследовать. 

2)  Формулировка целей и задач экспертной оценки, определение её границ.

Наличие четко сформулированной цели и так же ясно определенных задач является совершенно необходимым условием успеха исследования. Результатом данного этапа является выделение центральных (стратегических) и вспомогательных (тактических) целей и задач, что помогает оптимально распределить время и силы экспертов, сосредоточить внимание на основных вопросах, четко определить границы экспертизы.

3)  Отбор экспертов и формирование экспертных групп.

Для отбора экспертов необходимо, во-первых, сформулировать критерии отбора, во-вторых, определить процедуры отбора.

В качестве основных критериев отбора можно назвать следующие:

1. Уровень компетентности эксперта в данной предметной области:   квалификация, опыт и профессиональная принадлежность эксперта; высокий уровень общей эрудиции;  оценки эксперта должны быть стабильны во времени; наличие определенного практического или исследовательского опыта; количество и качество выполненных ранее экспертиз; психологическая установка на будущее; способность к адекватному отображению тенденций развития исследуемого объекта.[9]

2. Степень объективности и беспристрастности эксперта при анализе и оценке явлений в данной предметной области, отсутствие заинтересованности в конечном результате прогноза. 

3. Умение эксперта работать в команде: коммуникативные навыки, способность к совместному творчеству, креативность, эвристичность.

При оценивании экспертов по названным критериям и выборе экспертов могут использоваться следующие процедуры: самооценка экспертов; взаимная оценка экспертов; оценка экспертов независимыми специалистами; оценка уровня компетентности с учетом качества ранее проведенных экспертиз. Следует учитывать также тот факт, что современные социально-экономические и политические проблемы чрезвычайно сложны, поэтому для их полноценного исследования зачастую необходимо привлечение экспертов, представляющих различные отрасли знаний.

Результатом данного этапа является создание рабочей группы экспертов, если проводится коллективная экспертиза, либо выбор отдельного эксперта, если применяется индивидуальные методы экспертизы. В функции экспертов входят проведение опроса, обработка материалов и анализ результатов экспертной оценки, а также дача ответов на поставленные вопросы, касающиеся перспектив развития исследуемых процессов.

4)  Выделение критериев и оптимального метода экспертной оценки.

Данный этап предполагает разработку специального формуляра или системы бальных оценок, при помощи которых эксперт будет оценивать варианты различных решений, обосновывать выбор оптимальных вариантов.[10]

На выбор метода экспертной оценки оказывает влияние состояние информационной базы, составляющей необходимое условие для обоснованного и достоверного выбора варианта экспертного решения. Метод получения экспертной оценки обусловлен также спецификой характера исследуемой проблемы и основан на определении необходимого числа экспертов, способных обеспечить объективный и точный анализ сложившихся тенденций.

5)  Непосредственное проведение экспертного оценивания.

Данный этап включает такие процедуры, как: доведение до сведения экспертов правил и условий проведения работ; распространение опросных листов; организацию выполнения процедуры экспертного оценивания, для чего необходимо создать такие условия для эксперта, чтобы он мог выполнить работу независимо от результатов работы его коллег. При проведении экспертных оценок необходимо препятствовать давлению более авторитетных экспертов на мнение большинства, а также установить и соблюдать регламент проведения экспертизы. Во время проведения экспертизы организатор работ должен контролировать сроки, готовить и представлять экспертам дополнительные материалы с разъяснениями или сведениями, которые могут пригодиться при работе эксперта.

Результатом данного этапа экспертного оценивания является определение наиболее вероятных вариантов развития внутренних и внешних особенностей исследуемой проблемы, разработка предварительного прогноза дальнейшего протекания социально-экономических и политических процессов.

6)  Статистический анализ и обработка экспертных оценок.

После получения ответов экспертов необходимо произвести обработку материалов, которые характеризуют степень согласованности мнений экспертов. При отсутствии значимой согласованности экспертов необходимо выявить причины несогласованности и признать отсутствие согласованного мнения. Результатом данного этапа является получение исходного материала для синтеза прогнозных гипотез и вариантов развития исследуемого явления, построение модели свойств объекта на основе обработанных ответов экспертов.[11]

7)  Подготовка отчета с результатами экспертного оценивания.

На данном этапе происходит оформление результатов проведенных экспертных оценок  и окончательно формулируется прогноз дальнейшего развития исследуемого явления. В отчете последовательно указывается цель исследования, состав экспертов, полученная экспертная оценка и результаты статистического анализа результатов. Важным моментом заключительного этапа проведения экспертизы является публикация окончательных результатов с подготовленными предложениями по их применению.

Таким образом, проведение экспертных оценок предполагает прохождение определенных этапов, позволяющих в значительной мере повысить эффективность исследования и получить наиболее объективные выводы экспертов. Верное определение проблемы, целей и задач экспертизы, корректный подбор высококвалифицированных экспертов – залог успеха применения экспертных оценок в исследованиях социально-экономических и политических процессов.

Важнейшим этапом проведения экспертного оценивания является правильный выбор из многообразия существующих методов экспертных оценок необходимого, обусловленного спецификой исследуемой проблемы, либо принятие решения о применении сразу нескольких методов для получения достоверных выводов в результате исследования. В связи с этим, существует определенная классификация методов экспертных оценок, отображающая их особенности.

2.2.                     Классификация методов экспертных оценок

Методы экспертных оценок, используемые в исследованиях социально-экономических и политических процессов, характеризуется разнообразным характером их применения, что позволяет решить исследуемую проблему различными способами. Совокупность методов экспертных оценок  можно систематизировать по следующим признакам: степень охвата экспертизой; характер обработки результатов экспертизы; уровень алгоритмизации и возможности автоматизации процедуры.

По степени охвата экспертизой различают:

1. Индивидуальные методы экспертизы, основанные на мнении отдельного эксперта и использовании этого мнения как конечного результата экспертизы.

2.   Коллективную экспертизу, которая предполагает использование группы экспертов. При коллективной экспертизе специалисты высказывают мнение независимо друг от друга, а конечный результат экспертизы устанавливается путем соответствующей обработки этих мнений.

По характеру обработки результатов экспертизы можно выделить экспертные методы:

- без математической обработки, когда мнение эксперта в представленной им форме рассматривается как конечный результат экспертизы;