Методы экспертных оценок
Основные понятия метода экспертных оценок. Процедура получения оценок от экспертов. Обработка результатов решения. Примеры задач, при решении которых могут использоваться экспертные оценки. Этапы подготовки и проведения экспертизы. Понятие шкалы.
| Рубрика | Менеджмент и трудовые отношения |
| Вид | реферат |
| Язык | русский |
| Дата добавления | 01.05.2012 |
| Размер файла | 33,2 K |
Отправить свою хорошую работу в базу знаний просто. Используйте форму, расположенную ниже
Студенты, аспиранты, молодые ученые, использующие базу знаний в своей учебе и работе, будут вам очень благодарны.
Размещено на http://www.allbest.ru/
Методы экспертных оценок
Основные понятия метода экспертных оценок
В случаях чрезвычайной сложности проблемы, ее новизны, недостаточности имеющейся информации, невозможности математической формализации процесса решения приходится обращаться к рекомендациям компетентных специалистов, прекрасно знающих проблему, - к экспертам. Их решение задачи, аргументация, формирование количественных оценок, обработка последних формальными методами получили название метода экспертных оценок.
Эксперты (от латинского «expertus» - опытный) - это лица, обладающие знаниями и способные высказать аргументированное мнение по изучаемому явлению.
Процедура получения оценок от экспертов называется экспертизой.
Метод экспертных оценок включает в себя три составляющие.
1. Интуитивно-логический анализ задачи. Строится на логическом мышлении и интуиции экспертов, основан на их знании и опыте. Этим объясняется высокий уровень требований, предъявляемых к экспертам.
2. Решение и выдача количественных или качественных оценок. Эта процедура представляет собой завершающую часть работы эксперта. Им формируется решение по рассматриваемой проблеме и дается оценка ожидаемых результатов.
3. Обработка результатов решения. Полученные от экспертов оценки должны быть обработаны с целью получения итоговой оценки проблемы. В зависимости от поставленной задачи изменяется количество выполняемых на этом этапе расчетных и логических процедур. Для обеспечения оперативности и минимизации ошибок на данном этапе целесообразно использование вычислительной техники.
В условиях недостаточно полной и недостоверной информации методы экспертных оценок дают вполне приемлемые результаты. В настоящее время, характеризующееся ускорением научно-технического прогресса, появлением новых проблем организационного, технического, экономического, социально-психологического плана, сфера применения метода расширяется.
Приведем некоторые примеры задач, при решении которых могут использоваться экспертные оценки:
выбор вариантов технического и социально-экономического развития предприятия;
отбор проектов при проведении тендеров;
отбор заявок на получение грантов и разработку научных тем;
формирование тематики НИР и ОКР;
определение стратегических целей фирмы и т.п.
Для решения подобных задач могут использоваться различные формы проведения экспертизы:
дискуссия;
анкетирование;
интервьюирование;
«мозговой штурм»;
совещание;
деловая игра и др.
Иногда различные формы используются в комплексе.
Одной из наиболее перспективных форм проведения экспертного оценивания считается метод Дельфы.
Метод Дельфы - это набор процедур, выполняемых в определенной последовательности с целью формирования группового мнения о проблеме, характеризующейся недостаточностью информации для использования других методов.
Метод Дельфы - это метод группового анкетирования. Используемые процедуры характеризуются тремя основными чертами: анонимностью, регулируемой обратной связью и групповым ответом. Обратная связь осуществляется за счет проведения нескольких туров опроса, причем результаты каждого тура обрабатываются статистическими методами и сообщаются экспертам. Во втором и последующих турах эксперты аргументируют свои ответы. Таким образом, в последующих турах эксперты могут пересмотреть свои первоначальные ответы. От тура к туру ответы экспертов носят все более устойчивый характер и, в конце концов, перестают изменяться, что служит основанием для прекращения опросов.
Практика показывает, что обычно проводится три-четыре тура опросов, так как в дальнейшем оценки перестают изменяться.
Этапы подготовки и проведения экспертизы
Качество получаемых экспертных оценок в значительной степени определяется подготовкой экспертизы, а также применяемыми методами обработки информации, получаемой от экспертов.
Единых правил подготовки и проведения экспертизы нет.
Однако можно выделить основные этапы ее подготовки и проведения. К ним относятся:
формулировка цели экспертного анализа;
формирование группы организаторов экспертизы;
разработка процедур проведения экспертной оценки;
подбор экспертов;
получение экспертных оценок;
обработка результатов опроса и анализ полученных данных;
установление степени достижения цели экспертизы.
С точки зрения изучаемой нами дисциплины наибольший интерес представляют два этапа: получение экспертных оценок, обработка результатов опроса и анализ полученных данных.
Получение экспертных оценок. Понятие шкалы. Типы шкал
Рациональное использование информации, получаемой от экспертов, возможно при условии преобразования ее в форму, удобную для дальнейшего анализа.
Формализация информации, получаемой от экспертов, должна быть направлена на подготовку решения таких задач, которые не могут быть в полной мере описаны математически.
Одна из главных трудностей при оценивании состоит в том, что помимо явлений, объектов, факторов, состояние которых может быть выражено количественно (в руб., $, кг, км, % и т.п.), приходится оценивать качественные факторы, уровень которых нельзя точно определить. Часть информации, не поддающуюся количественному измерению, необходимо представить в виде косвенных оценок.
Если эксперт способен сравнить и оценить какие-либо объекты, явления, факторы, варианты действий, приписав каждому из них какое-либо число, то говорят, что он обладает определенной системой предпочтений.
В зависимости от того, по какой шкале заданы эти предпочтения, экспертные оценки содержат больший или меньший объем информации и обладают различной способностью к математической формализации.
Шкала - это инструмент (принятая система правил) оценки (измерения) каких-либо объектов или явлений.
Различают четыре типа шкал.
1. Номинальная шкала. Реализует простейший тип измерения. В этом случае проводится сравнение свойств объекта (явления) с каким-либо признаком-эталоном, результатом является упорядочение по двухэлементной шкале, где каждому из объектов (явлений) присваивается балл, равный нулю либо единице.
Примером измерения по номинальной шкале может служить проведение зачета. В этом случае эксперт-преподаватель оценивает уровень знаний студентов и выносит решение: зачет (объекту-студенту присваивается балл, равный нулю) или незачет (объекту-студенту присваивается балл, равный единице).
2. Порядковая шкала. Цель состоит в упорядочении объектов (явлений), а точнее, в выявлении с помощью экспертов скрытой упорядоченности, которая, по предположению, присуща множеству объектов. Результатом оценки является решение о том, что какой-либо объект (явление) предпочтительнее другого в отношении какого-то критерия.
Примером может служить определение жюри победителей и призеров какого-либо конкурса. Здесь эксперты должны решить, что участник, занявший первое место, оказался предпочтительнее (с точки зрения целей конкурса) участника, занявшего второе место. Участник, занявший второе место, в свою очередь, признается лучшим по отношению к третьему и т.д.
3. Интервальная шкала. Оценка по данной шкале позволяет не только определить, что один объект (явление) предпочтительнее другого, но также определить: на сколько предпочтительнее. Нулевая точка и единица измерения выбираются при этом произвольно.
Ярким примером оценки по интервальной шкале является проведение экзамена. Здесь эксперт-преподаватель, оценивая уровень знаний студентов, должен не только решить, что один студент знает материал лучше другого, но сказать: на сколько лучше. Измерение фактически производится по шкале из четырех баллов («неудовлетворительно», «удовлетворительно», «хорошо», «отлично»). При этом уровень знаний, соответствующий нулевому баллу (нулевая точка) не известен.
Измерение по интервальной шкале используется при выставлении экспертами-судьями оценок в таких видах спорта, как фигурное катание, прыжки в воду, художественная и спортивная гимнастика.
4. Шкала отношения. В данном случае предполагается, что известно абсолютное значение свойств объекта, т.е. известна истинная нулевая точка. Шкала используется для тех факторов, которые могут быть представлены количественно.
Например, при помощи такой шкалы эксперты могут оценить размер прибыли, которая может быть получена в результате реализации какого-либо проекта.
В зависимости от существа исследуемых объектов для их оценки могут быть использованы различные шкалы.
Такие факторы как затраты, прибыль, время могут быть оценены по шкале отношения или интервальной шкале (например, в рублях, днях, баллах).
Для оценки таких факторов как срок окупаемости или сравнительная эффективность может быть использована интервальная или порядковая шкала.
Качественные, например, социальные или политические факторы могут оцениваться по порядковой или номинальной шкале.
Способы измерения объектов
Перейдем к рассмотрению вопросов формирования экспертных оценок, а именно к рассмотрению способов (техники) измерения объектов.
В первую очередь нас будут интересовать способы измерения, позволяющие расположить объекты на порядковой или интервальной шкале, поскольку именно такой тип оценок чаще всего используется при проведении экспертизы. Это объясняется тем, что оценка по номинальной шкале предполагает лишь два варианта ответов - ДА, НЕТ. По шкале отношения измеряются факторы, имеющие количественный характер. Значения этих факторов часто можно получить расчетным путем без использования экспертных оценок.
Выделим способы измерения объектов, наиболее часто применяемые при оценке по порядковой или интервальной шкале: ранжирование, парное сравнение, непосредственная оценка.
1. Ранжирование - это расположение объектов в порядке возрастания или убывания какого-либо присущего им свойства. Ранжирование позволяет выбрать из исследуемой совокупности факторов наиболее существенный.
Результатом проведения ранжирования является ранжировка.
Если имеется n объектов, то в результате их ранжирования j-ым экспертом каждый объект получает оценку xij - ранг, приписываемый i-му объекту j-ым экспертом.
Значения xij находятся в интервале от 1 до n. Ранг самого важного фактора равен единице, наименее значимого - числу n.
Ранжировкой j-го эксперта называется последовательность рангов x1j, x2j, …, xnj.
Достоинством метода является его простота, а недостатком - ограниченные возможности использования. При оценке большого количества объектов экспертам очень трудно строить ранжированный ряд, поскольку приходится учитывать множество сложных связей.
От этого недостатка свободен следующий метод.
2. Парное сравнение - это установление предпочтения объектов при сравнении всех возможных пар. Здесь не нужно, как при ранжировании, упорядочивать все объекты, необходимо в каждой из пар выявить более значимый объект или установить их равенство.
Парное сравнение можно проводить при большом числе объектов, а также в тех случаях, когда различие между объектами столь незначительно, что практически невыполнимо их ранжирование.
При использовании метода чаще всего составляется матрица размером nxn, где n - количество сравниваемых объектов.
Общий вид матрицы парных сравнений
|
Объекты |
1 |
2 |
… |
j |
… |
n |
||
|
1 |
||||||||
|
2 |
||||||||
|
… |
||||||||
|
i |
||||||||
|
… |
||||||||
|
n |
Сумма (по строке) в данном случае позволяет оценить относительную значимость объектов. Тот объект, для которого сумма окажется наибольшей, может быть признан наиболее важным (значимым).
Суммирование можно производить и по столбцам (), тогда самым существенным будет фактор, набравший наименьшее количество баллов.
3. Непосредственная оценка. Часто бывает желательным не только упорядочить (ранжировать объекты анализа), но и определить, на сколько один фактор более значим, чем другие.
В этом случае диапазон изменения характеристик объекта разбивается на отдельные интервалы, каждому из которых приписывается определенная оценка (балл), например, от 0 до 10.
Именно поэтому метод непосредственной оценки иногда именуют также балльным методом.
Смысл метода состоит в том, что эксперт помещает каждый из анализируемых объектов в определенный интервал (приписывает балл). Измерителем при этом является степень обладания объекта тем или иным свойством. Число интервалов, на которые разбивается диапазон изменения свойства, может быть различным для разных экспертов. Кроме того, метод разрешает давать одну и ту же оценку (т.е. помещать в один и тот же интервал) различным объектам.
Например, метод непосредственной оценки используется при проведении экзаменов. Здесь диапазон, характеризующий уровень знаний студентов мысленно разбивается экспертом-преподавателем на интервалы, подобно тому, как показано на рисунке.
Пример разбиения диапазона изменения характеристик объекта на интервалы
Обработка результатов опроса экспертов
Перейдем к рассмотрению процедур, выполняемых на этапе обработки результатов опроса.
На базе оценок экспертов получается обобщенная информация об исследуемом объекте (явлении) и формируется решение, задаваемое целью экспертизы. При обработке индивидуальных оценок экспертов используют различные количественные и качественные методы. Выбор того или иного метода зависит от сложности решаемой проблемы, формы, в которой представлены мнения экспертов, целей экспертизы.
Чаще всего при обработке результатов опроса используются методы математической статистики.
В зависимости от целей экспертизы при обработке оценок могут решаться следующие проблемы:
формирование обобщенной оценки;
определение относительных весов объектов;
установление степени согласованности мнений экспертов и др.
Далее рассмотрим некоторые методы решения каждой из перечисленных задач.
Формирование обобщенной оценки
Итак, пусть группа экспертов оценила какой-либо объект, тогда xj - оценка j-го эксперта, , где m - число экспертов.
Для формирования обобщенной оценки группы экспертов чаще всего используются средние величины. Например, медиана (ME), за которую принимается такая оценка, по отношению к которой число бoльших оценок равняется числу меньших.
Может использоваться также точечная оценка для группы экспертов, вычисляемая как среднее арифметическое:
|
(7.2) |
Определение относительных весов объектов
Иногда требуется определить, насколько тот или иной фактор (объект) важен (существенен) с точки зрения какого-либо критерия. В этом случае говорят, что нужно определить вес каждого фактора.
Один из методов определения весов состоит в следующем. Пусть xij - оценка фактора i, данная j-ым экспертом, , , n - число сравниваемых объектов, m - число экспертов. Тогда вес i-го объекта, подсчитанный по оценкам всех экспертов (wi), равен:
|
(7.3) |
где wij - вес i-го объекта, подсчитанный по оценкам j-го эксперта, равен:
экспертный оценка шкала
|
(7.4) |
Размещено на Allbest.ru
Подобные документы
Характеристика экспертных процедур: особенности эвристических методов и моделей, методов индивидуальных оценок, коллективных экспертных оценок. Специфика проведения экспертизы, содержание и обработка результатов. Экспертная оценка уровня странового риска.
реферат [209,3 K], добавлен 10.05.2010Сущность и содержание, основные этапы проведения экспертного анализа, сферы и особенности его практического применения, интерпретация результатов. Степень достоверности данной экспертизы. Применение метода экспертных оценок для построения дерева целей.
курсовая работа [31,1 K], добавлен 25.02.2012Решение задач, аргументация и формирование количественных оценок результатов формальными методами. Составляющие метода экспертных оценок. Метод коллективной генерации идей ("мозговая атака"). Метод Дельфи, особенности метода фокус-групп, SWOT-анализ.
презентация [1,4 M], добавлен 30.03.2014Сущность и виды экспертных оценок, цели их использования. Основные этапы экспертного исследования. Характеристика методов коллективной работы экспертной группы, а также методов получения индивидуального мнения. Обработка результатов опроса специалистов.
реферат [39,2 K], добавлен 03.04.2012Использование экспертных оценок. Применение различных методов для решения одной задачи. Ранжирование, парные и множественные сравнения, непосредственная оценка, метод Терстоуна – наиболее употребительные процедуры экспертных измерений. Методы типа Дельфи.
контрольная работа [1,8 M], добавлен 09.03.2011Усовершенствование методик группового принятия решений. Содержание метода экспертных оценок Дельфи. Работа с экспертными оценками, их статистическая обработка. Экспертные оценки вероятности события, их расхождение. Характер взаимодействия экспертов.
курсовая работа [238,6 K], добавлен 21.01.2015Методы получения экспертных оценок. Проблема подбора экспертов. Нормативные документы, регулирующие деятельность экспертных комиссий. Принятие решений в условиях риска и в условиях неопределенности. Задачи на принятие решений в условиях неопределенности.
контрольная работа [29,6 K], добавлен 15.07.2010Понятие и особенности применения экспертных технологий, как неотъемлемой составной части процесса подготовки и принятия важных управленческих решений. Изучение основных стадий экспертного опроса. Подбор экспертов. Метод Делфи, ПАТТЕРН, мозговой атаки.
реферат [62,7 K], добавлен 09.10.2016Сущность и виды решений в процессе управления производством. Основные требования, предъявляемые к качеству управленческих решений. Методы оптимизации управленческих решений. Способы оптимизации решений методами экспертных оценок.
курсовая работа [39,4 K], добавлен 08.05.2002Исследование содержания и структуры метода экспертных оценок Дельфи. Изучение особенностей работы с экспертными оценками, их статистической обработки. Описание традиционной процедуры экспертизы. Характер взаимодействия экспертов. Модификации метода.
контрольная работа [225,1 K], добавлен 08.06.2015
