Обработка и анализ результатов опроса экспертов - раздел Образование, Тема 0. Цели и задачи моделирования Заполненные Экспертами Анкеты, Подвергаются Логической Проверке, Сводке И По...
В зависимости от характера задач, решаемых в процессе экспертизы, получаются оценки двух типов:
- количественные значения прогнозируемых процессов и явлений, например, количественные оценки степени удовлетворения опроса на изделия определенных групп товаров
- ранги или балльные оценки, определяющие последовательность развития али соотношения элементов структуры прогнозируемых процессов и явлений, например, ранги влияния нескольких факторов на потребность населения в определенных товарах.
Соответственно с этими типами оценок производится их согласование и анализ.
Для определения степени согласованности и получения групповой количественной экспертной оценки исчисляются простая и взвешенная средние и коэффициенты вариации V:
m – число экспертов
- оценка эксперта i
- коэффициент самооценки эксперта
- СКО
Если V<33%, мнения экспертов считается согласованными и полученная величина принимается за окончательную групповую оценку.
Если V>33%, мнения экспертов считаются недостаточно согласованными к экспертизу проводят повторно. Перед вторым туром экспертизы рекомендуется сообщить экспертам следующие показатели: среднюю оценку, крайние оценки и среднюю среди оценок за исключением крайних.
Пример. Рассмотрим расчет экспертной оценки предполагаемого уровня удовлетворения спроса на конкретный вид обуви (туфли летние женские открытые). На основе опроса 31 эксперта получены следующие данные:
Следовательно, хотя формально оценки согласованны (V=0.28<0.33), эксперты, считающие себя более компетентными, считают удовлетворённость спроса существенно меньшей, чем все эксперты (53,3<<70.2). Необходимо конкретизировать понятие «удовлетворение спроса» и повторить экспертизу.
15.2. Применение метода "Дельфи" для прогнозирования
Пример применения метода "Дельфи" для прогнозирования развития науки и техники. Рассматриваются перспективы развития науки и техники на ближайшие 50 лет. Выбрано 200 экспертов. Опрос производится в 4 тура с промежутком в один месяц.
1 тур. Экспертам высылается вопросник с просьбой перечислять основные изобретения и научные открытие, которые они считают необходимыми и осуществимыми в течение ближайших 50 лет, в той области науки и техники, к которой они имеют непосредственное отношение. Так как эксперты компетентны в избранной области научно-технического прогресса (например, энергетике), то в анкете они обосновывают потребность в называемых ими открытиях и изобретениях. После сбора анкет проводится их обработка, при которой одинаковые события должны быть объединены, второстепенные (с точки зрения организаторов опроса) исключены, а окончательный перечень становится второй анкетой.
II тyр. Эксперты получают анкету с перечнем событий и оценивают даты их реализации. Их также просят привести соображения, почему указанные прогнозируемые события не должны произойти раньше или позже указанной даты. После сбора результатов 2-го тура организаторы подготавливают статистическую сводку мнений экспертов, включающую дополнительные доводы и аргументы "за" и "против" указанных сроков реализаций событий.
Результатом всей процедуры должен быть прогноз, содержащий точку зрения, с которой могло бы согласиться большинство экспертов в группе.
Для оценки степени согласованности используются статистические характеристики результатов опроса группы экспертов. В классическом методе "Дельфи" на каждом этапе прогнозируемое значение срока наступления события представляется в ведя медианы и двух квартилей. Медиана (Ме) представляет собой число (срок реализации события), оценки которой одной половиной группы экспертов больше этой величины, а другой - меньше. Квартилем называется такое значение срока наступления события, который указан экспертом под номером, равным 1/4 (нижний квартиль) или 3/4 (верхний квартиль) числового ряда распределения временных оценок по возрастанию.
Т.о., каждый ответ внутри группы экспертов учитывается при построении Me, а величина разброса ответов характеризуется величиной интервала между квартилями.
Рассмотрим пример расчета данных характеристик для 2 тура опроса при прогнозе срока создания промышленной термоядерной энергетической установки.
Рисунок 4‑1 Оценка согласованности экспертов.
При нечетном числе экспертов N=2K+1 медианное значение принимают оценка, данная (K+1)-м экспертом. При четном N=2K Ме равна среднему из значений оценок двух центральных экспертов, т.е. Ме=1/2 (Tк. + Tк+1), где Tк .- ответ эксперта К. В нашем примере (игнорируя мнение «Никогда») медианное значение имеет срок, названный экспертом вод номером (191-1)/2+1=96 от начала ряда. Предполагая, что ответы 52 экспертов в интервале 20-25лет распределены равномерно, получаем ответ эксперта 81: 20+(25-20)/52*(96-73)= 22,2.
Квартили рассчитываются аналогично:
Нижний Q1=Tк.«K=1/4*191=47,75, т.е. в интервале 15-20 лет (28<47.75<73). Q1=T47,75.=15+(20-15)/45*(47,75-28)=17,2
Верхний Q3=Tк.«K=3/4*191=143,25, т.е. интервал 25-30 лет (125<143,25<146). Q3= T143,25.=25+(30-25)/21*(143,25-125)=29,3
Т.о., 50% экспертов за то, что термояд изобретут через 17,2 – 29,3 года, что можно признать достаточно согласованным.
III тур. Эксперты получают статистические данные и сводку аргументов по 2-му туру, чтобы сформировать новые оценки предполагаемой даты наступления данного события. Если прежняя оценка эксперта не попала в интервал между квартилями, то он должен изменить её или подтвердить эту оценку обоснованием.
После 3-го тура организаторы вновь проводят статистическую обработку анкет, вычисляют новые значения Q1, Ме, Q2, и объединяют их в новом вопроснике вместе о аргументами.
IV тур. Эксперты получают анкеты последнего этапа опроса, вновь корректируют сроки наступления указанных событий и, по желанию организаторов, аргументирует свою оценку,
В качестве дополнительной оценки "достоверности" прогноза по методу "Дельфи" могут быть использованы ответы экспертов типа «Никогда».
Тема Цели и задачи моделирования... Объективная основа моделирования... События окружающего мира повторяется Наряду с линейным временем существует время циклическое Для живых существ...
Если Вам нужно дополнительный материал на эту тему, или Вы не нашли то, что искали, рекомендуем воспользоваться поиском по нашей базе работ:
Обработка и анализ результатов опроса экспертов
Что будем делать с полученным материалом:
Если этот материал оказался полезным ля Вас, Вы можете сохранить его на свою страничку в социальных сетях:
Иерархия понятий моделирования
Предсказание - суждение о неизвестном
Предсказания делятся на прорицания и предвидения.
Прорицание не требует доказательств и обоснований (например, интуиция), хотя и может
Порядок моделирования
Прогнозирование - часть исследования, следовательно сохраняет его общий порядок проведения. (инд, дед; латер) ???
Прогнозирование можно разбить на 3 стадии: две содержательные (постановка,
Графическое представление вариационных рядов
Прогнозирование средствами мат. статистики производится на основе анализа вариационных рядов и их связей.
Варьирование - изменение признака от наблюдения к наблюдению. (Например, варьир
Номинальная шкала
Заключение о связи признаков можно получить графическим (зрительным / визуальным) и расчётным (аналитическим) путём. Взаимосвязь признаков номинальной шкалы отображается Пузырьковой диаграммой. Из
Ранговая шкала
Взаимосвязь ранговых признаков отображается на двухосной (лестничной) диаграмме. Каждому объекту соответствует отрезок (ступенька лестницы), связывающий значения признаков этого объекта.
Понятие временного ряда
Временной (динамический) ряд – изменение признака со временем. Или: это вариационный ряд, где наблюдения – моменты времени.
При прогнозировании динамического ряда изучается зависим
Задачи анализа временного ряда
Задачи - выявление (анализ) и [математическое] описание его компонент, прежде всего - тренда.
Этапы (задачи) анализа тренда:
1. Первоначальная подготовка данных (сопоставимость, р
Первоначальная подготовка данных
Собранные в динамический ряд данные должны быть сопоставимы:
- по физической единице измерения (метры, тонны; тонны, кг)
- по стоимостной оценке (учет инфляции)
- по врем
Механическое сглаживание
Пример 1. Берётся циркуль. Раскрывается на к.л. ширину по усмотрению исследователя. Проводится окружность с центром в первой точке графика. Центр окружности соединяется отрезком с точкой пересечени
Прогнозирование по тренду
На основании проведённого моделирования основных компонент ряда (тренда и сезонности) можно производить предсказания о возможных значениях этого ряда. В статистике это выражается в экстра- и интерп
Сглаживание по четной базе
Перенести формулу сглаживания по нечетной базе на четную базу непосредственно не удаётся – непонятно к какому периоду относить усреднённые значения. В зависимости от целей сглаживания используют сл
Взвешенное сглаживание
В предыдущем методе крайние наблюдения включались в сглаживание с весами ½. Данный подход можно расширить, в зависимости от представлений о природе изучаемого явления. Например, если предпол
Меры близости рядов
После того как определён вид уравнения тренда, необходимо определить (провести, построить) сам тренд, т.е. - определить его параметры. Из бесконечного множества трендов [определённого ранее вида] н
Критерии случайности
(Выдержка из - Кендел М. Временные ряды. М.: Финансы и статистика, - 1981.)
Простейшей гипотезой, которую можно выдвинуть относительно колеблющегося ряда, является предпо
Поворотные точки
Наиболее простой для применения критерий, особенно если ряд изображен графически, состоит в подсчете пиков и впадин. «Пик»— это величина, которая больше двух соседних. «Впадина», наоборот, - значен
Длина фазы
Определенный интерес представляет не только число поворотных точек, но и распределение интервалов между ними. Интервал между двумя поворотными точками называется «фазой». Таким образом, если
Критерий, основанный на знаках разностей
Несколько более сложный критерий состоит в подсчете числа положительных разностей первого порядка в ряде, иначе говоря, числа точек возрастания ряда. Для ряда из n членов получаем n — 1 разностей
Сравнительный анализ критериев
Имеются и другие критерии, представляющие значительный теоретический интерес, но на практике они требуются редко.
Критерий для обнаружения линейного тренда требуется не часто, но когда он
Понятие регрессии
Колебания в динамическом ряду часто не строго периодические, но зависят от колебаний другого признака (напр.: стоимость продаж от объёма продаж). Тогда эффективно строить зависимость ряда не от без
Отбор факторов для регрессии
Различают содержательный и формальный отбор. С содержательной точки зрения в перечень факторов включаются причиныизучаемого явления (напр., причиной выпуска продукции является нали
Вид функции регрессии
Формально, регрессионное уравнение может быть произвольного вида. Практически используется только линейная регрессия (и функции, сводимые к ней):
Расчет параметров регрессии
Расчет параметров производится по методу наименьших квадратов, аналогично тренду.
MS Excel оценивает параметры только линейной регрессии (Сервис->Анализ данных->Регрессия либо с испо
ОПРЕДЕЛЕНИЕ ОПТИМАЛЬНОГО АССОРТИМЕНТА
Постановка задачи. Имеется р видов ресурсов в количествах b1, … bi, … bn, которые могут быть использованы при производстве q видов изделий. Задана матрица А = || аij ||, где аij, х
Предварительный этап
На данном этапе определяются:
а) конкретные задачи (вопросы, по которым должна проводится экспертиза);
б) состав лиц, входящих в рабочую группу по подготовке и проведению эксперти
Формирование рабочей группы
Рабочая группа - это группа специалистов, осуществляющих организаторскую работу по проведению экспертизы. В рабочую группу должны входить главным .образом работники специальных подразделений по и
Определение квалификации экспертов
Качество экспертных оценок во многом определяется квалификацией экспертов. При отборе экспертов используются метода оценки квалификации экспертов. Чаще всего - это метода "самооценки" ил
Тема 16. Самореализующиеся прогнозы
Самореализующийся прогноз – социально-экономическое явление, состоящее в наличии социального механизма, приводящего к [не] реализации любого прогноза [высказанного в определённых условиях].
Хотите получать на электронную почту самые свежие новости?
Подпишитесь на Нашу рассылку
Наша политика приватности обеспечивает 100% безопасность и анонимность Ваших E-Mail
и взвешенная 
средние и коэффициенты вариации V:
- оценка эксперта i
- коэффициент самооценки эксперта
- СКО
Рисунок 4‑1 Оценка согласованности экспертов.
Новости и инфо для студентов