Методология экспертных оценок

Современный этап развития научно-технического прогресса вызвал ярко выраженную потребность в разработке экспертных методов оценки проектов и исследовательских систем.

В тех случаях, когда совокупность объективных показателей не всегда способна адекватно отобразить состояние исследуемой системы, становится целесообразным оценивать качество проектов и, соответственно, осуществлять их последующий отбор на основе мнения специально отобранных для этой цели специалистов-экспертов, владеющих методологией экспертных оценок и имеющих богатый опыт в сфере решения узловых проблемных задач.

Экспертные методы завоевывают популярность по мере увеличения доли качественных критериев в отображении и оценке социальных процессов. Одной из причин, вызвавших эту тенденцию, является необходимость учета интуиции опытных экспертов, выносящих заключения о целесообразности принятия того или иного варианта решения в процессе разработки и реализации программы. Факт проникновения субъективных подходов в плоскость объективной оценки рассматриваемых альтернатив, лежащий в основе методологии экспертных методов, призван обеспечить более точное и адекватное отображение свойств и признаков оцениваемого объекта. Особое значение экспертные методы начинают играть в условиях нестабильной экономики, когда степень неопределенности в исходе различных социально-экономических ситуаций становится все более значимой.

Как правило, экспертные методы используются для постижения объектов, оценка которых не поддается однозначной интерпретации, основанной на принципах математической формализации.

Отсутствие достоверной информации об объекте или ее неполнота также способствуют обращению к использованию труда экспертов.

М. Горшков и Ф. Шереги выделяют четыре функции, которые выполняет метод экспертной оценки в социологическом исследовании:

• ? оценка состояния;
• ? оценка причин явления или процесса;
• ? прогноз тенденций развития социальных процессов;
• ? выработка форм и методов решения социальной проблемы'.

Известный исследователь проблем стратегического управления И. Ансофф рассматривал использование экспертных оценок в качестве признака современного этапа в развитии стратегического менеджмента, характеризующегося необходимостью формирования диверсифицированной компанией объективных представлений о сути происходящих в конкурентной среде изменениях, основанных на гибких экспертных решениях [1].

Методология экспертных оценок применяется в решении следующих задач:

• ? обоснование выбора варианта управленческого решения на основе заложенных в основу оценки критериев;
• ? определение перспективных направлений использования имеющихся в организации технологий;
• ? согласование мнения между различными уровнями управления;
• ? проведение полной и адекватной оценки ситуации, сложившейся на предприятии, в отрасли и пр.

Для решения многих проблем важно не столько нахождение наиболее правильного с технологической точки зрения варианта решения проблемной ситуации, но и его способности быть реализованным в сложившихся в организации условиях.

Эксперт соотносит для вынесения своего заключения множество критериев, полагаясь на свою квалификацию и опыт. И поэтому при.

¹ Горшков М., Шереги Ф. Прикладная социология: Учеб, пособие для вузов. — М. 2003. — С. 143−144.

организации экспертного опроса много зависит от того, как правильно будут подобраны эксперты для решения поставленной задачи.

Привлечение эксперта должно опираться на следующие профессиональные качества, которым он должен соответствовать. Среди них наиболее важными являются:

• ? квалификация и опыт;
• ? владение методами экспертной оценки;
• ? специализация;
• ? представление обо всех звеньев технологической цепочки и уровней управления.

В процессе подбора экспертов организаторы опроса должны обеспечить беспристрастность экспертов в оценке объекта, наделить его всей необходимой для полного осмысления проблемы информацией.

Основным требованием к отбору эксперта выступает его квалификация. Определить квалификацию эксперта можно по следующим критериям.

• 1. Число переменных, которые, по его мнению, существенны для принятия решения. Эксперт использует меньше переменных, чем не эксперт.
• 2. Оценка важности этих переменных с его точки зрения.
• 3. Скорость или эффективность идентификации экспертом качественных различий между переменными.
• 4. Собственная оценка экспертом своих возможностей и квалификации.
• 5. Достоверность предыдущих заключений эксперта.

В качестве одной из форм объективной оценки качества эксперта, его компетентности, может быть рассмотрен способ взаимной оценки экспертов, на основе которой производится отбор наиболее компетентных участников экспертной оценки.

Технология отбора представляет собой разновидность социометрического опроса, в рамках которого каждый респондент должен выбрать наиболее компетентного, с его точки зрения, специалиста, способного произвести максимально объективную оценку исследуемого события. Полученные результаты вносятся в таблицу, обозначив в ней номерами от 1 до 10 экспертов, участвующих в процедуре взаимной оценки. В клетках таблицы (табл. 3.8) число 1 обозначает выбор, тире — отсутствие выбора (или отрицательная оценка).

Таблица 3.8 Взаимные оценки экспертов.

С целью уточненной оценки необходим учет веса каждого эксперта, которым заменяются единицы в таблице.

Таким образом, можно построить новую таблицу (табл. 3.9).

Таблица 3.9

Уточненные взаимные оценки экспертов.

Таким образом, если мы намерены отобрать из общего количества кандидатов пять наиболее компетентных экспертов, используя данный метод, то предпочтительными выглядят шансы 7,5,2,9,4 экспертов [4].

Окончательный выбор эксперта может быть обоснован также с помощью личной самооценки экспертом своих способностей вынесения объективного заключения по рассматриваемому вопросу.

Основу методологии экспертных оценок составляют экспертные методы анализа. Экспертные методы анализа — это исследование параметров исследуемого объекта, основанное на принципах организации коллективной мыследеятелыюсти с использованием технологии экспертного опроса. Цель экспертного анализа заключается в предварительном тестировании объекта исследования, направленном на выявление в нем внутренних свойств и связей, скрытых от исследователя. Благодаря методам экспертного анализа, собирается необходимый для вынесения экспертной оценки материал, обеспечивается его соответствие принятым стандартам.

Технология проведения экспертного анализа предполагает прохождение ряда этапов.

1. Подготовка экспертов.

Процедура подготовки экспертов включает в себя ознакомление их с особенностями исследуемого объекта, требованиями организации к его качеству и т. д. При распределении заданий необходимо учитывать квалификацию, опыт и профессиональную принадлежность экспертов, которые могут отличать одного эксперта от другого. В ходе организации экспертного анализа необходимо обеспечение ряда условий: создание общей рабочей атмосферы, объекты экспертных оценок должны быть тщательно проранжированы по этапам экспертного анализа. И, кроме того, работа экспертов должна предполагать введение функции внешнего управления.

2. Выделение критериев и условий принятия экспертных решений.

Выделение критериев, положенных в основу проведения экспертного анализа, предполагает разработку специального формуляра или системы балльных оценок, при помощи которых эксперт будет оценивать варианты различных решений, обосновывать выбор оптимальных вариантов. С целью определения неравнозначности различных переменных, используемых в процессе оценки рассматриваемых альтернатив, допускается формулировка весовых коэффициентов, призванных иерархизировать переменные по степени их роли в достижении ожидаемого результата.

3. Выбор оптимального метода экспертной оценки.

На выбор оптимального метода экспертной оценки оказывает влияние состояние информационной базы, составляющей необходимое условие для обоснованного и достоверного выбора варианта экспертного решения. Для этого эксперт может непосредственно указать значение показателя для оцениваемого объекта. Например, указывая стоимость квартиры, при которой она может иметь конкурентоспособный спрос, эксперт способен помочь риэлтерской фирме определить емкость рынка жилья и спрогнозировать спрос на различные его категории. Однако совет может оказаться неудачным, если окажется, что свои выводы эксперт сделал на основе своего уникального опыта, не связанного с наметившимися тенденциями на рынке недвижимости, подмеченными другими экспертами. Поэтому с целью повышения качества экспертной оценки значительную роль имеет выбор метода ее получения, основанного на определении необходимого числа экспертов, способных обеспечить объективный и точный анализ сложившихся тенденций.