Правила постановки задачи исследования
· Четкое определение условий, времени, внешних и внутренних ограничений проблемы.
· Возможность ответа на вопрос с доступной человеческому опыту точностью.
· Вопрос лучше формулировать как качественное утверждение, чем как оценку числа. Для численных параметров не рекомендуется задавать более пяти градаций.
· Эксперты оценивают возможные варианты, не следует ожидать от них построения законченного плана действий, развернутого описания возможных решений.
Выбор формы исследования
· По форме участия экспертов: очное, заочное (очный метод позволяет сосредоточить внимание эксперт на решаемой проблеме, что повышает качество результата, однако заочный метод может быть дешевле).
· По количеству итераций (повторов процедуры для повышения точности) – одношаговые и итерациями.
· По решаемым задачам: генерирующие решения и оценивающие варианты.
· По типу ответа: идейные, ранжирующие, оценивающие объект в относительной или абсолютной (численной) шкале.
· По способу обработки мнений экспертов: непосредственные и аналитические.
· По количеству привлекаемых экспертов: без ограничения, ограниченные. Обычно используется 5-12 человек экспертов.
Что должно быть результатом работы экспертной комиссии?
· Сбор информации для ЛПР.
· Подготовка проекта решения для ЛПР.
Определение бюджета проекта
· После выбора метода экспертного оценивания можно определить затраты на процедуру, которые включают: Оплата экспертов, аренда помещения, канцтовары, оплата специалиста по проведению и анализу результатов экспертизы
Подготовка информационных материалов
· Подготовка информационных материалов, бланков анкет, инвентаря и модератора процедуры
· Эксперты должны разносторонне рассмотреть представленную проблему. Поэтому необходимо подготовить информационные материалы с описанием проблемы, имеющиеся статистические данные, справочные материалы.
· Следует избегать следующего: упоминать разработчиков материалов, выделять тот или иной вариант решения, выражать отношение руководства к ожидаемым результатам. Данные должны быть разносторонние и нейтральные.
· Заранее необходимо разработать бланки анкет или технические задания для экспертов. В зависимости от метода они могут быть с открытыми и закрытыми вопросами, ответ может даваться в виде суждении, парного сравнения, ранжированного ряда, в баллах или в виде абсолютной оценки.
· Процедуру проводит независимый модератор процедуры, который контролирует соблюдение регламента, раздает материалы и анкеты, но сам не высказывает свое мнение.
Подбор экспертов
· Эксперты должны обладать опытом в областях, соответствующих решаемым задачам.
· При подборе экспертов следует учитывать момент личной заинтересованности, который может стать существенным препятствием для получения объективного суждения.
· Полезно вестиРеестр возможных экспертов, например, в области государственной экологической экспертизы или судейства фигурного катания.
· Если списки отсутствуют, то применяется «метод снежного кома», когда один эксперт, наиболее уважаемый специалист, рекомендует ряд других и далее по цепочке, пока не будет подобран необходимый коллектив.
o Опасность «клановости»
Оценка компетентности экспертов
· Успешность участия в предыдущих экспертизах