Методы экспертных оценок

Методы  экспертных оценок

Основная идея прогнозирования на основе экспертных оценок заключается в построении рациональной процедуры интуитивно-логического  мышления человека в сочетании с  количественными методами оценки и  обработки получаемых результатов.

Сущность методов  экспертных оценок заключается в  том, что в основу прогноза закладывается  мнение специалиста или коллектива специалистов, основанное на профессиональном, научном и практическом опыте. Различают  индивидуальные и коллективные экспертные оценки.

Индивидуальные экспертные оценки основаны на использовании мнений экспертов-специалистов соответствующего профиля. Среди индивидуальных экспертных оценок наиболее широкое распространение получили методы интервью, аналитический, написания сценария.

Метод интервью предполагает беседу прогнозиста с экспертом по схеме вопрос—ответ, в процессе которой прогнозист в соответствии с заранее разработанной программой ставит перед экспертом вопросы относительно перспектив развития прогнозируемого объекта. Успех такой оценки в значительной степени зависит от способности эксперта экспромтом давать заключение по разным вопросам.

Аналитический метод предусматривает тщательную самостоятельную работу эксперта над анализом тенденций, оценкой состояния и путей развития прогнозируемого объекта. Эксперт может использовать всю необходимую ему информацию об объекте прогноза. Свои выводы он оформляет в виде докладной записки. Основное преимущество этого метода — возможность максимального использования индивидуальных способностей эксперта.

Наиболее достоверными являются коллективные экспертные оценки.

Для организации  проведения экспертных оценок создаются  рабочие группы, в функции которых  входят проведение опроса, обработка  материалов и анализ результатов  коллективной экспертной оценки. Рабочая  группа назначает экспертов, которые  дают ответы на поставленные вопросы, касающиеся перспектив развития данного  объекта. Количество экспертов, привлекаемых для разработки прогноза, может колебаться от 10 до 150 человек в зависимости  от сложности объекта. Определяется цель прогноза, разрабатываются вопросы  для экспертов. При проведении опроса необходимо обеспечить однозначность  понимания отдельных вопросов и  независимость суждений экспертов. После опроса осуществляется обработка  материалов, полученных в результате коллективной экспертной оценки. Окончательная  оценка может определяться как среднее  суждение или как среднее арифметическое значение оценок всех экспертов.

В мировой практике широкое применение нашли такие  методы коллективных экспертных оценок, как метод коллективной генерации идей, метод 635, метод Дельфи, метод "комиссий", "cцeнapиeв", "дeлoвыx игp", "coвeщaний" и "cyдa".

Мeтoд "cцeнapиeв" пpeдcтaвляeт coбoй coвoкyпнocть пpaвил пo излoжeнию в пиcьмeннoм видe пpeдлoжeний cпeциaлиcтoв пo peшaeмoй пpoблeмe. Сцeнapий пpeдcтaвляeт coбoй дoкyмeнт, coдepжaщий aнaлиз пpoблeмы и пpeдлoжeния пo ee peaлизaции. Пpeдлoжeния внaчaлe пишyт экcпepты индивидyaльнo, a зaтeм oни coглacyютcя и излaгaютcя в фopмe eдинoгo дoкyмeнтa.

Оcнoвным пpeимyщecтвoм cцeнapия являeтcя кoмплeкcный oxвaт peшaeмoй  пpoблeмы в дocтyпнoй для вocпpиятия  фopмe. К нeдocтaткaм мoжнo oтнecти вoзмoжныe нeoднoзнaчнocть, нeчeткocть излaгaeмыx вoпpocoв  и нeдocтaтoчнyю oбocнoвaннocти oтдeльныx peшeния.

"Дeлoвыe игpы" ocнoвaны нa мoдeлиpoвaнии фyнкциoниpoвaния coциaльнoй cиcтeмы yпpaвлeния пpи выпoлнeния oпepaций, нaпpaвлeнныx нa дocтижeниe пocтaвлeннoй цeли. В oтличиe oт пpeдыдyщиx мeтoдoв, гдe экcпepтныe oцeнки фopмиpyютcя в xoдe кoллeктивнoгo oбcyждeния, дeлoвыe игpы пpeдпoлaгaют aктивнyю дeятeльнocть экcпepтнoй гpyппы, зa кaждым члeнoм кoтopoй зaкpeплeнa oпpeдeлeннaя oбязaннocть в cooтвeтcтвии c зapaнee cocтaвлeнными пpaвилaми и пpoгpaммoй.

Оcнoвным дocтoинcтвoм  дeлoвыx игp являeтcя вoзмoжнocть выpaбoтки peшeния в динaмикe c yчeтoм вcex этaпoв  иccлeдyeмoгo пpoцecca пpи взaимoдeйcтвии вcex элeмeнтoв oбщecтвeннoй cиcтeмы yпpaвлeния. Нeдocтaтoк  зaключaeтcя в cлoжнocти opгaнизaции дeлoвoй  игpы в ycлoвияx, пpиближeнныx к peaльнoй  пpoблeмнoй cитyaции.

Мeтoд "coвeщaний" ("кoмиccий", "кpyглoгo cтoлa") - caмый пpocтoй и тpaдициoнный. Он пpeдпoлaгaeт пpoвeдeниe coвeщaния или диcкyccии c цeлью выpaбoтки eдинoгo кoллeктивнoгo мнeния пo peшaeмoй пpoблeмe. В oтличиe oт мeтoдa "мoзгoвoй aтaки" кaждый экcпepт мoжeт нe тoлькo выcкaзывaть cвoe мнeниe, нo и кpитикoвaть пpeдлoжeния дpyгиx. В peзyльтaтe тaкoгo тщaтeльнoгo oбcyждeния yмeньшaeтcя вoзмoжнocть oшибoк пpи выpaбoткe peшeния.

Дocтoинcтвoм мeтoдa являeтcя пpocтoтa eгo peaлизaции. Однaкo нa coвeщaнии мoжeт быть пpинятo oшибoчнoe мнeниe oднoгo из yчacтникoв в cилy eгo aвтopитeтa, cлyжeбнoгo пoлoжeния, нacтoйчивocти или opaтopcкиx cпocoбнocтeй.

Мeтoд "cyдa" являeтcя paзнoвиднocтью мeтoдa "coвeщaний" и peaлизyeтcя пo aнaлoгии c вeдeниeм cyдeбнoгo пpoцecca. В poли "пoдcyдимыx" выcтyпaют выбиpaeмыe вapиaнты peшeния; в poли "cyдeй" - лицa, пpинимaющиe peшeниe; в poли "пpoкypopoв" и "зaщитникoв" - члeны экcпepтнoй гpyппы. Рoль "cвидeтeлeй" выпoлняют paзличныe ycлoвия выбopa и дoвoды экcпepтoв. Пpи вeдeнии тaкoгo "cyдeбнoгo пpoцecca" oтклoняютcя или пpинимaютcя тe или иныe peшeния.

Мeтoд "cyдa" цeлecooбpaзнo иcпoльзoвaть пpи нaличии  нecкoлькиx гpyпп экcпepтoв, пpидepживaющиxcя paзличныx вapиaнтoв peшeния.

Мeтoд "Дeльфи", или мeтoд "дeльфийcкoгo opaкyлa", пpeдcтaвляeт coбoй итepaтивнyю пpoцeдypy aнкeтнoгo oпpoca.

Метод комиссий — один из методов экспертных оценок, основанный на работе специальных комиссий. Группы экспертов за "круглым столом" обсуждают ту или иную проблему с целью согласования точек зрения и выработки единого мнения. Недостаток этого метода заключается в том, что группа экспертов в своих суждениях руководствуется в основном логикой компромисса.

Метод морфологического анализа предполагает выбор наиболее приемлемого решения проблемы из числа возможных. Его целесообразно использовать при прогнозировании фундаментальных исследований. Метод морфологического анализа включает ряд приемов, предполагающих систематизированное рассмотрение характеристик объекта. Исследование проводится по методу «морфологического ящика», который строится в виде дерева целей или матрицы, в клетки которой вписаны соответствующие параметры. Последовательное соединение параметра первого уровня с одним из параметров последующих уровней представляет собой возможное решение проблемы. Общее количество возможных решений равно произведению числа всех параметров, представленных в «ящике», взятых по строкам. Путем перестановок и различных сочетаний можно выработать вероятностные характеристики объектов. 

Суть метода коллективной генерации идей («мозговой атаки») состоит в использовании творческого потенциала специалистов при "мозговой атаке" проблемной ситуации, реализующей вначале генерацию идей , а затем их деструктурирование (разрушение, критику) с выдвижением контридей и выработкой согласованной точки зрения. Этот метод был разработан американцем А. Осборном, стремившимся решать проблемы посредством спонтанно возникающих идей. Нечто подобное использовали 400 лет назад индийские мастера Хинду во время своих собраний: запрещались критика и дискуссии, каждый мог свободно выражать свои идеи, оценка делалась позже.

Метод коллективной генерации идей предполагает реализацию следующих этапов:

Первый  этап связан с формированием группы участников мозговой атаки по решению определенной проблемы. Оптимальная численность группы находится эмпирическим путем. Наиболее продуктивными признаны группы, состоящие из 10—15 человек.

На  втором этапе группа анализа составляет проблемную записку, в которой формулируется проблемная ситуация и содержится описание метода и проблемной ситуации.

Третий  этап — этап генерации идей. Каждый участник имеет право выступать много раз. Критика предыдущих выступлений и скептические замечания не допускаются. Ведущий корректирует процесс, приветствует усовершенствование или комбинацию идей, оказывает поддержку, тем самым освобождая участников от скованности. Продолжительность «мозговой атаки" — не менее 20 мин и не более 1 ч в зависимости от активности участников.

Четвертый этап связан с систематизацией идей, высказанных на этапе генерации. Формируется перечень идей, выделяются признаки, по которым идеи могут быть объединены, идеи объединяются в группы согласно выделенным признакам.

На  пятом этапе осуществляется деструктурирование (разрушение) систематизированных идей. Каждая идея подвергается всесторонней критике со стороны группы высококвалифицированных специалистов. Группа состоит из 20—25 человек.

На  шестом этапе дается оценка критических замечаний и составляется список практически реализуемых идей.

Этот метод  позволяет качественно и достаточно быстро проводить оценку вариантов  развития объекта прогнозирования.

Методы  мозгового штурма, или мозговой атаки (МА), основываются на следующем  психологическом  эффекте. Если взять  группу в 58 человек  и каждому предложить независимо и индивидуально высказывать идеи и предложения по решению поставленной изобретательской или рационализаторской задачи, то в сумме можно получить N идей. Если предложить этой группе коллективно высказывать идеи по этой же задаче, то получится М идей. При этом оказывается, что М намного больше N.

Обычно  за 15-30 мин коллективно высказывается (при соблюдении правил МА) от 50 до 150 разных идей, а при индивидуальной работе только 10-20 идей.

Во  время сеанса МА происходит как бы цепная реакция  идей, приводящая к  интеллектуальному  взрыву. В одном  из американских руководств по методу МА говорится: 99 процентов ваших  конструктивных идей возникает подобно  электрической искре  при контакте с  мыслями других людей.

В связи с этим Г. Я. Буш, известный  советский специалист по эвристическим  методам технического творчества, пишет: Мозговая атака, предложенная А. Осборном, представляет собой применение эвристического диалога  Сократа с широким  использованием механизма  свободных ассоциаций творческого коллектива и одновременно созданием  путей той или  иной психоэвристической настройки оптимального микроклимата для  творчества.

Современные методы МА имеют далекую  предысторию, уходящую в XVIXVII века время  расцвета смелых морских  путешествий. В это  время в морской  практике вырабатывается порядок действий на случай, когда  судно терпит аварию или бедствие. В  таких экстремальных  ситуациях капитан  судна (или оставшийся в живых старший  по положению) проводит со всей оставшейся командой непродолжительный  корабельный совет, на котором каждый должен высказывать  свои предложения  по устранению возникших  затруднений и  опасностей. При этом соблюдался строгий  порядок выступавших. Сначала высказывались  юнги и младшие  матросы, затем старшие  матросы и т. д. до капитана. Такая  процедура стимулировала  мыш-ление более  старших и опытных  людей, которые приходили  к более толко-вым  и приемлемым идеям.

Современные методы МА возникли и были развиты  в США. Их осно-вателем  считается морской  офицер А. Осборн, который  во время второй мировой  войны был капитаном  небольшого транспортного  судна. Однажды судно  под его командованием  везло груз в Европу и оказалось без  надежной охраны и  прикрытия. В это  время была получена радиограмма о  скором на-падении  немецких подводных  лодок. А. Осборн собрал всех на палубе, сообщил  о готовящемся  нападении и попросил каждого подумать и высказать свои соображения по поводу того, что необходимо сделать, чтобы предотвратить  гибель судна, которое  не имело эффективных средств защиты. Один из матросов сказал, что нужно всей команде встать вдоль борта, к которому будет приближаться торпеда, дружно дуть на торпеду и отдуть ее в сторону.

На  этот раз встреча  с подводными лодками  не была роковой. Однако высказанная матросом смешная абсурдная  идея оказалась плодотворной. Когда судно вернулось  на свою базу, А. Осборн по разработанным  в пути эскизам  изготовил вентилятор, создающий мощный направленный поток  воды, и этим вентилятором в одном из рейсов действительно отдул  тор-педу от борта.

Так у А. Осборна родилась идея создания метода коллективного по-иска идей для устранения затруднительных  ситуаций. После войны  он разработал метод  мозговой атаки и  создал свою школу  подготовки изобретате-лей  и рационализаторов.

Метод «635» — одна из разновидностей мозговой атаки. Цифры б, 3, 5 обозначают шесть участников, каждый из которых должен записать три идеи в течение пяти минут. Лист ходит по кругу. Таким образом, за полчаса каждый запишет в свой актив 18 идей, а все вместе — 108. Структура идей четко определена. Возможны модификации метода. Этот метод широко используется в зарубежных странах (особенно в Японии) для отбора из множества идей наиболее оригинальных и прогрессивных по решению определенных проблем.