рефераты конспекты курсовые дипломные лекции шпоры

Реферат Курсовая Конспект

Экспертные оценки, ранговая корреляция и конкордация

Экспертные оценки, ранговая корреляция и конкордация - Конспект Лекций, раздел Экономика, УЧЕТ И АУДИТ. Конспект лекций Пусть В Процессе Системного Анализа Нам Пришлось Учитывать Некоторую Величину...

Пусть в процессе системного анализа нам пришлось учитывать некоторую величину U, измерение которой возможно лишь по порядковой шкале (Ord).Например, нам приходится учитывать 10 целей функционирования системы и требуется выяснить их относительную значимость, удельные веса.

Если имеется группа лиц, компетентность которых в данной области не вызывает сомнений, то можно опросить каждого из экспертов, предложив им расположить цели по важности или “проранжировать” их. В простейшем случае можно не разрешать повторять ранги, хотя это не обязательно — повторение рангов всегда можно учесть.

Результаты экспертной оценки в нашем примере представим таблицей рангов целей:

Таблица 3.2

Эксперты 1 2 3 4 5 6 7 8 9 10 Сумма
A 3 5 1 8 7 10 9 2 4 6 55
B 5 1 2 6 8 9 10 3 4 7 55
Сумма рангов 8 6 3 14 15 19 19 5 8 13
Суммарный ранг 4.5 3 1 7 8 9.5 9.5 2 4.5 6 55

Итак, для каждой из целей Ti мы можем найти сумму рангов, определенных экспертами, и затем суммарный или результирующий ранг целиRi. Если суммы рангов совпадают — назначается среднее значение.

Метод ранговой корреляции позволяет ответить на вопрос — насколько коррелированны, неслучайны ранжировки каждого из двух экспертов, а значит — насколько можно доверять результирующим рангам? Как обычно, выдвигается основная гипотеза — об отсутствии связи между ранжировками и устанавливается вероятность справедливости этой гипотезы. Для этого можно использовать два подхода: определение коэффициентов ранговой корреляции Спирмэна или Кендэлла.

Более простым в реализации является первый — вычисляется значение коэффициента Спирмэна

Rs = 1 - ;{3 - 9}

где di определяются разностями рангов первой и второй ранжировок по n объектов в каждой.

В нашем примере сумма квадратов разностей рангов составляет 30, а коэффициент корреляции Спирмэна около 0.8, что дает значение вероятности гипотезы о полной независимости двух ранжировок всего лишь 0.004.

При небходимости можно воспользоваться услугами группы из mэкспертов, установить результирующие ранги целей, но тогда возникнет вопрос о согласованности мнений этих экспертов или конкордации.

Пусть у нас имеются ранжировки 4 экспертов по отношению к 6 факторам, которые определяют эффективность некоторой системы.

Таблица 3.3

Факторы --> Эксперты 1 2 3 4 5 6 Сумма
A 5 4 1 6 3 2 21
B 2 3 1 5 6 4 21
C 4 1 6 3 2 5 21
D 4 3 2 3 2 5 21
Сумма рангов Сум. ранг 15 4 11 2 10 1 19 6 12 3 17 5 84
Отклонение суммы от среднего +1 1 -3 9 -4 16 +5 25 -2 4 +3 9 0 64

 

Заметим, что полная сумма рангов составляет 84, что дает в среднем по 14 на фактор.

Для общего случая n факторов и m экспертов среднее значение суммы рангов для любого фактора определится выражением

D {3 - 10}

Теперь можно оценить степень согласованности мнений экспертов по отношению к шести факторам. Для каждого из факторов наблюдается отклонение суммы рангов, указанных экспертами, от среднего значения такой суммы. Поскольку сумма этих отклонений всегда равна нулю, для их усреднения разумно использовать квадраты значений.

В нашем случае сумма таких квадратов составит S= 64, а в общем случае эта сумма будет наибольшей только при полном совпадении мнений всех экспертов по отношению ко всем факторам:

Smax{3 - 11}

М. Кэндэллом предложен показатель согласованности или коэффициент конкордации, определяемый как

{3 - 12}

В нашем примере значение коэффициента конкордации составляет около 0.229, что при четырех экспертах и шести факторах достаточно, чтобы с вероятностью не более 0.05 считать мнения экспертов несогласованными. Дело в том, что как раз случайность ранжировок, их некоррелированность просчитывается достаточно просто. Так для нашего примера указанная вероятность соответствует сумме квадратов отклонений S= 143.3 , что намного больше 64.

В заключение вопроса об особенностях метода экспертных оценок в системном анализе отметим еще два обстоятельства.

В первом примере мы получили результирующие ранги 10 целей функционирования некоторой системы. Как воспользоваться этой результируюзей ранжировкой? Как перейти от ранговой (Ord) шкалы целей к шкале весовых коэффициентов — в диапазоне от 0 до 1?

Здесь обычно используются элементарные приемы нормирования. Если цель 3 имеет ранг 1, цель 8 имеет ранг 2 и т. д., а сумма рангов составляет 55, то весовой коэффициент для цели 3 будет наибольшим и сумма весов всех 10 целей составит 1.

Вес цели придется определять как

(11-1) / 55 для 3 цели;

(11-2) / 55 для 8 цели и т. д.

При использовании групповой экспертной оценки можно не только выяснять мнение экспертов о показателях, необходимых для системного анализа. Очень часто в подобных ситуациях используют так называемый метод Дельфы (от легенды о дельфийском оракуле).

Опрос экспертов проводят в несколько этапов, как правило — анонимно. После очередного этапа от эксперта требуется не просто ранжировка, но и ее обоснование. Эти обоснования сообщаются всем экспертам перед очередным этапом без указания авторов обоснований.

Имеющийся опыт свидетельствует о возможностях существенно повысить представительность, обоснованность и, главное, достоверность суждений экспертов. В качестве “побочного эффекта” можно составить мнение о профессиональности каждого эксперта.

 

 

– Конец работы –

Эта тема принадлежит разделу:

УЧЕТ И АУДИТ. Конспект лекций

Конспект лекций для специальности УЧЕТ И АУДИТ...

Если Вам нужно дополнительный материал на эту тему, или Вы не нашли то, что искали, рекомендуем воспользоваться поиском по нашей базе работ: Экспертные оценки, ранговая корреляция и конкордация

Что будем делать с полученным материалом:

Если этот материал оказался полезным ля Вас, Вы можете сохранить его на свою страничку в социальных сетях:

Все темы данного раздела:

Общие понятия теории систем и системного анализа
Термины теория систем и системный анализ или, более кратко — системный подход, несмотря на период более 25 лет их использования, все еще не нашли общепринятого, стандартного ис

Сущность и принципы системного подхода
ТССА, как отрасль науки, может быть разделена на две, достаточно условные части: · теоретическую: использующую такие отрасли как теория вероятностей, теория информаци

Проблемы согласования целей
Как уже отмечалось, в большинстве случаев (в экономических системах — повсеместно), показателем полноты достижения цели “жизни” системы служит стоимостной показатель. Разумеется, что выбор показате

Проблемы оценки связей в системе
Рассмотрим теперь вопрос о связях системы — между отдельными элементами подсистем, подсистемами разных уровней и связях с внешней средой. Хотя бы умозрительно можно полагать наличие каналов,

Моделирование как метод системного анализа
Одной из проблем, с которой сталкиваются почти всегда при проведении системного анализа, является проблема эксперимента в системе или над системой. Очень редко это разрешено моральным

Процессы принятия управляющих решений
Пусть построена модель системы с соблюдением всех принципов системного подхода, разработаны и “обкатаны” алгоритмы необходимых расчетов, приготовлены варианты управляющих воздействий на систему. На

Случайные события и величины, их основные характеристики
Как уже говорилось, при анализе больших систем наполнителем каналов связи между элементами, подсистемами и системы в целом могут быть: · продукция, т. е. реальные, физически ощутимые пред

Взаимосвязи случайных событий
Вернемся теперь к вопросу о случайных событиях. Здесь методически удобнее рассматривать вначале простые события (может произойти или не произойти). Вероятность события X будем обозначать

Схемы случайных событий и законы распределений случайных величин
Большую роль в теории и практике системного анализа играют некоторые стандартные распределения непрерывных и дискретных СВ. Эти распределения иногда называют "теоретическими", п

Методы непараметрической статистики
Использование классических распределений случайных величин обычно называют "параметрической статистикой" - мы делаем предположение о том, что интересующая нас СВ (дискретная или непрерывн

Корреляция случайных величин
Прямое токование термина корреляция — стохастическая, вероятная, возможная связь между двумя (парная) или несколькими (множественная) случайными величинами. Вы

Линейная регрессия
В тех случаях, когда из природы процессов в системе или из данных наблюдений над ней следует вывод о нормальном законе распределения двух СВ - Y и X, из которых одна является независи

Элементы теории статистических решений
Что такое - статистическое решение? В качестве простейшего примера рассмотрим ситуацию, в которой вам предлагают сыграть в такую игру: · вам заплатят 2 доллара, если подброшенная монета у

Общие положения
В большинстве случаев практического применения системного анализа для исследования свойств и последующего оптимального управления системой можно выделить следующие основные этапы: · Содержательная

Содержательная постановка задачи
Уже упоминалось, что в постановке задачи системного анализа обязательно участие двух сторон: заказчика (ЛПР) и исполнителя данного системного проекта. При этом участие заказчика не ограничивается ф

Построение модели изучаемой системы в общем случае
Модель изучаемой системы в самом лаконичном виде можно представить в виде зависимости E = f(X,Y){3 - 1} где: E— некоторый количественный показатель эффек

Моделирование в условиях определенности
Классическим примером простейшей задачи системного анализа в условиях определенности может служить задача производства и поставок товара. Пусть некоторая фирма должна производить и поставлять проду

Моделирование системы в условиях неопределенности
Как уже отмечалось в первой части нашего курса, в большинстве реальных больших систем не обойтись без учета “состояний природы” — воздействий стохастического типа, случайных величин или случ

Моделирование систем массового обслуживания
Достаточно часто при анализе экономических систем приходится решать т. н. задачи массового обслуживания, возникающие в следующей ситуации. Пусть анализируется система технического обслуживания авто

Моделирование в условиях противодействия, игровые модели
Как уже неоднократно отмечалось, системный анализ невозможен без учета взаимодействий данной системы с внешней средой. Ранее упоминалась необходимость учитывать состояния природы — бо

Моделирование в условиях противодействия, модели торгов
К этому классу относятся задачи анализа систем с противодействием (конкуренцией), также игровых по сути, но с одной особенностью — "правила игры" не постоянны в одном единственном пункте

Методы анализа больших систем, планирование экспериментов
  Еще в начале рассмотрения вопросов о целях и методах системного анализа мы обнаружили ситуации, в которых нет возможности описать элемент системы, подсистему и систему в целом а

Методы анализа больших систем, факторный анализ
  Данный параграф является заключительным и более не будет возможности осветить еще одну особенность методов системного анализа, показать вам еще один путь к достижению профессиональ

От автора
Выражая благодарность каждому, кто дочитал до этого места или прослушал все лекции и посетил все семинары, автор считает своим долгом сделать ряд пояснений, раскрыть свою позицию и свои взгляды на

Теория систем и системный анализ
Общие вопросы системного анализа Методы поиска экстремума Уайлд Д.Дж. Наука об управлении. Байесовский подход

Общие вопросы математики
Комбинаторика Введение в комбинаторный анализ Риордан Дж. Прикладная комбинаторная математика Бе

Математическая статистика
Общие вопросы Метод наименьших квадратов Линник Ю.В. Теория распределений Кендалл М.,СтьюартА.

Хотите получать на электронную почту самые свежие новости?
Education Insider Sample
Подпишитесь на Нашу рассылку
Наша политика приватности обеспечивает 100% безопасность и анонимность Ваших E-Mail
Реклама
Соответствующий теме материал
  • Похожее
  • Популярное
  • Облако тегов
  • Здесь
  • Временно
  • Пусто
Теги