Лекции Предпосылки экспертных оценок История экспертных оценок

5. Постановка экспертного опроса
Постановка экспертизы включает:

1. 
   Идентификацию объектов экспертизы, подлежащих оцениванию. Под этим понимают оценивание интенсивности проявления факторов-листьев для каждого из оцениваемых объектов и оценивание относительной важности факторов, т.е. определение весовых коэффициентов.
   
2. 
   Выбор критерия оценки и формулировка вопроса. По форме различают следующие вопросы:
   

открытые вопросы (ответ не регламентирован и дается в любой форме) и закрытые (эксперт выбирает один из вариантов ответа);
прямые и косвенные (маскирующие цель исследования).
Источником правил формирования вопроса является механизм распознавания и запоминания информации человеком, исследуемый когнитивной психологией.

3. 
   Разработка и описание шкалы оценок.
   

Проектирование шкал относится к одному из разделов теории измерения. Измерение – это алгоритмическая операция, которая данному объекту (процессу, явлению, состоянию) ставит в соответствие определенное обозначение (число, номер, символ).
При разработке шкалы существует две проблемы:
Измеримость - определение числовой системы, в которую гомоморфно отображается измеряемая система. Если такая шкала существует, то система измерима.
Единственность – определение множества шкал, в которые может быть гомоморфно отображена измеряемая система. Указанное множество характеризуется видом преобразования, переводящее одну шкалу множества в другую. Шкалы бывают качественные (номинальная, нечеткая, порядковая, гиперпорядка) и количественные (интервальная, разностей, отношений, абсолютная)

4. 
   Выбор способа оценивания.
   

5. 
   Способы оценивания
   

6.1. Способы качественного оценивания
Методы классификации. Эксперту предъявляется весь набор объектов и предлагается разбить их на классы. При большом числе объектов эксперту можно предложить лишь часть объектов (например, два). После того, как эксперт справится с задачей, можно предложить новый объект, который он должен отнести в одному из выделенных классов, либо образовать новый класс. Процесс заканчивается, когда классифицируется последний объект.