Раздел 2. «Модели и методы принятия решений».

Лагунова А.В.

ПОУвСО-1

Раздел 2. «Модели и методы принятия решений».

Тема 2. «Количественные и качественные экспертные оценки».

Оценка эксперта – количественное и/или качественное измерение соответствующего показателя.

Критерии, используемые при формировании оценочной системы, должны быть измеримыми, т. е. должна иметься воз­можность оценки любого рассматриваемого объекта эксперти­зы по каждому из критериев.

В тех случаях, когда критерий, характеризующий объект, не может быть измерен объективно, мы говорим о субъективных критериях, имея в виду прежде всего, что для оценки объек­тов по таким критериям отсутствуют объективные критерии и необходима разработка специальных вербально - числовых шкал.

Естественно, что такие критерии, как "объем продукции", "себестоимость производства", "срок окупаемости", могут быть отнесены к объективным. В то же время такие критерии, как "гудвилл", связанный с оценкой интеллектуальной собст­венности, "имидж фирмы", "социальная значимость проекта" и другие, могут быть измерены лишь субъективно.

Многие из объективных крите­риев, относящихся к будущим периодам, нередко также могут быть оценены лишь субъективно. Так, например, ожидаемые объ­емы производства продукции, которые станут возможными по­сле реализации проекта, ожидаемая цена единицы продукции и др. часто во многом зависят от оценок экспертов, являющихся в строгом смысле слова субъективными.

Поэтому так необходим профессионализм при организации и проведении процесса экспертного оценивания, анализе и обработке результатов экспертных оценок, используемых при выработке и принятии управленческих решений.

Но первым шагом в процессе экспертного оценивания яв­ляется формирование адекватной оценочной системы.

Мы обсудили некоторые требования, предъявляемые к со­вокупности критериев, включаемых в состав оценочной сис­темы.

Практическое формирование перечня критериев также представляет собой в значительной степени экспертную про­цедуру. Это могут быть 2—3-туровые экспертизы, когда пред­варительно сформулированный перечень критериев уточняет­ся экспертами.

При формировании совокупности критериев должно быть обращено внимание на такие моменты, как четкое понимание смысла каждого из критериев ЛПР и экспертами.

Иногда целесообразно агрегирование критериев. Этим мо­жет быть достигнуто как снижение избыточности критериев, особенно в случае, когда имеется частичное дублирование критериев, так и общее уменьшение количества критериев, что важно для снижения трудоемкости работы с оценочной систе­мой.

Оценочные системы

Значительная роль при проведении процедур многокритери­ального экспертного оценивания принадлежит оценочным системам.

Приведем их описание.

Структура оценочной системы

Оценочная система, используемая при многокритериаль­ном экспертном оценивании, включает такие важные состав­ляющие, как:

§ перечень критериев, характеризующих объект принятия управленческого решения;

§ оценка сравнительной важности критериев;

§ шкала для оценки проектов по критериям;

§ формирование принципа выбора.

Формирование составляющих оценочной системы в различной степени трудоемко. Однако отсутствие какой-либо из перечис­ленных выше составляющих либо недостаточное качество ка­кой-либо из них делают невозможным получение адекватной оценки проекта и как следствие затрудняют процесс выработки и принятия эффективных решений.

 

Методы получения качественных экспертных оценок

Экспертная классификация (определение принадлежности к группе, сорту, категории – сорт чая)

Ранжирование альтернатив – упорядочение сравниваемых альтернатив по степени предпочтительности определённого признака.

 

Метод экспертных кривых применяется для получении прогнозов на основе анализа динамики показателей, характеризующих объект эксперимента (график, экстраполяция). Для предотвращения ошибок при экстраполяции на основе обобщенного мнения экспертов на графике определяются точки, в которых следует ожидать изменения тенденции развития показателя.

Инструментами вышеперечисленных методов являются качественные и количественные шкалы.

Метод средней точки

Метод используется, когда альтернативных вариантов до­статочно много. Если через f(a1) обозначим оценку первого альтернативного варианта значения показателя, относительно которого определяется сравнительная предпочтительность объектов, через f(a2) — оценку второго альтернативного вари­анта, то далее эксперту предлагается подобрать третий альтер­нативный вариант a3, оценка которого f(a3) расположена в се­редине между значениями f(a1) и f(a2) и равна f(a1) + f(a2)/2.

При этом в качестве первого и второго альтернативных ва­риантов целесообразно выбирать наименее и наиболее пред­почтительные альтернативные варианты.

Далее эксперт указывает альтернативный вариант a4, значе­ние которого f(a4) расположено посередине между f(a1) и f(a3), и альтернативный вариант a5, значение которого f(a5) располо­жено посередине между значениями f(a1) и f(a4).

Процедура завершается, когда определяется сравнительная предпочтительность всех участвующих в экспертизе альтерна­тивных вариантов.

Метод Черчмена — Акофа

Метод Черчмена — Акофа используется при количествен­ной оценке сравнительной предпочтительности альтернатив­ных вариантов и допускает корректировку оценок, даваемых экспертами.

В методе предполагается, что оценки альтернативных вари­антов — неотрицательные числа, что если альтернативный ва­риант a1 предпочтительнее альтернативного варианта а2, то f(a1) больше, чем f(a2), а оценка одновременной реализации альтернативных вариантов a1 и а2 равняется f(a1) + f(a2)).

Все альтернативные варианты ранжируются по предпочти­тельности, и каждому из них эксперт назначает количествен­ные оценки, как правило, в долях единицы.

Метод лотерей

Согласно этому методу, для любой тройки альтернативных вариантов а1, а2, а3, упорядоченных в порядке убывания пред­почтительности, эксперт указывает такую вероятность p, при которой альтернативный вариант а2 равноценен лотерее, при которой альтернативный вариант a1 встречается с вероятно­стью р, а альтернативный вариант а3 — с вероятностью 1 — р.

Экспертная классификация

Этот метод целесообразно использовать, когда необходимо определить принадлежность оцениваемых альтернативных ва­риантов к установленным и принятым к использованию клас­сам, категориям, уровням, сортам и т. д. (далее — классы).

Он может быть использован и тогда, когда конкретные классы, к которым должны быть отнесены оцениваемые объ­екты, заранее не определены. Может быть заранее не опреде­лено и число классов, на которое производится разбиение оцениваемых объектов. Оно может быть установлено лишь по­сле завершения процедуры классификации.

Способы оценки качеств экспертов и формирование экспертных комиссий.

Метод суда.

Процедура аналогична судебному заседанию. Часть экспертов – обвиняют, часть – защищают, часть – присяжные, выносящие окончательный вердикт. Экспертные оценки – субъективны, поэтому ключевой вопрос – подбор экспертов.

Оценка качеств эксперта.

Эксперт – специалист, профессионал, оценки и суждения которого лицо, принимающее решение, считает полезным учитывать в процессе принятия решения.

Формирование состава экспертной комиссии эависит от:

- конкретной ситуации принятия решения;

- возможностей организаторов экспертизы привлечь для работы высококвалифицированных специалистов;

- возможностей специалистов принять участие в работе экспертной комиссии.

Не существует общепринятой единой методики оценки качеств эксперта.

Можно опираться на:

- профессиональные знания;

- опыт и эффективность деятельности в составе экспертных комиссий.

Способы оценки качеств эксперта:

1. Априорные – не используют информацию о результатах участия эксперта в предыдущих экспертизах (самооценка, взаимная оценка, метод списка экспертов, документационный (анкетный) метод).

2. Апостериорные – используют информацию о результатах участия эксперта в предыдущих экспертизах (метод парных сравнений объектов, наиболее предпочтительных для данного эксперта, метод отклонения от результирующей групповой оценки).

3. Тестовые – подразумевают проведение специального испытания.

Правила:

• Тест должен быть специально разработан под конкретные объекты экспертной оценки
• Истинные значения оцениваемых параметров (правильные ответы) не должны быть известны эксперту
• Должна быть разработана шкала для определения точности оценок, даваемых экспертом
• Вероятность случайного угадывания правильной оценки должна быть очень мала.

Использование тестовых методов позволяет оценить такое важное профессиональное качество эксперта как воспроизводимость экспертных оценок. Проводят ряд аналогичных тестов и оценивают полученные результаты. Стабильность оценок говорит о профессиональной компетенции эксперта.

При разработке управленческих решений важно правильно оценить сложившуюся ситуацию и альтернативные варианты решении с целью выбора наиболее эффективного решения, соот­ветствующего целям организации и ЛПР.

Правильная оценка способствует достижению поставленных целей, в то время как ошибочная оценка и как следствие невер­но принятое решение затрудняют или вообще делают его невоз­можным.

Обсудим технологии оценивания при принятии управленческих решений. Оценочный процесс при принятии решений является пре­рогативой человека-управленца. Поэтому будем говорить прежде всего о технологиях экспертного оценивания, посколь­ку основным субъектом оценочного процесса в найдем случае чаше всего является высококвалифицированный специалиста области управления — эксперт.

А поскольку в разных случаях будут осуществляться оцен­ки достаточно широкого круга проблем, начиная от весьма разнообразных ситуаций, встречающихся в управленческой деятельности, и кончая не менее разнообразными альтерна­тивными вариантами управленческих решений, обсуждая ин­струментарий оценивания, будем говорить об объекте оце­нивания, или об объекте экспертизы.

В практике оценивания все большее значение приобретают многокритериальные оценки объектов экспертизы, которые во многих случаях обеспечивают получение более достоверной экспертной информации.

Действительно, во многих случаях объект характеризуется не одним критерием, а несколькими. Скажем, при оценке конкурентоспособности число таких критериев может дохо­дить до ста и более.

Наряду с термином "критерий" могут использоваться также термины "фактор", "показатель", "частный критерий" и т. д.

Если говорить о многокритериальном оценивании при при­нятии решений, то мы прежде всего хотим отметить связь, су­ществующую между критериями и целями.

Организация, ЛПР при принятии решений руководствуют­ся целями, которые они стремятся достигнуть. Каждой пели, как уже говорилось выше, должен соответствовать критерий, с помощью которого может быть оценена степень достижения цели. Так, например, если целью является обеспечение высокого качества выпускаемого предприятием изделия, то в роли интегрального критерия может выступать качество изделия, а в ро­ли частных критериев — показатели, характеризующие функ­циональные возможности изделия, экономические, экологи­ческие, эргономические, а также показатели надежности, без­опасности и др.

Естественно, что, оценив предварительно значения частных критериев для объекта, мы с большей достоверностью можем говорить об оценке качества объекта в целом.

 

 

Лагунова А.В.

ПОУвСО-1

Раздел 2. «Модели и методы принятия решений».