Методы согласования оценок (consensus technique)

Эти методы применяются при обработке индивидуальных экспертных оценок. Методы имеют много вариантов, различающихся способами, при помощи которых из индивидуальных оценок получается обобщенная.

При этом используются также различные методы согласования оценок:

• простейшие, основанные на получении средней вероятности $$p=\frac {1}{n} \sum^n_{i=1} p_i$$

(где $n$ — число участвующих экспертов) или средневзвешенного значения вероятности $$p_w=\bigg(\sum^n_{i=1}k_ip_i \bigg)/ \bigg(\sum^n_{i=1}k_i \bigg)$$

(где $k_i$ — веса, приписываемые оценке каждого эксперта);

• специальные методы оценки измерения и повышения коэффициентов согласованности (или коэффициентов непротиворечивости) мнений экспертов;
• методы, основанные на отборе экспертной группы с высоким коэффициентом согласованности мнений. Например, метод, основанный на преобразовании первых трех рангов дискретной шкалы в непрерывную с последующим нормированием этой новой шкалы, отражающей мнения отобранных экспертов.

Нередко при обработке материалов коллективной экспертной оценки используются методы теории ранговой корреляции. Для количественной оценки степени согласованности мнений экспертов применяется коэффициент конкордации $W$, который позволяет оценить, насколько согласованы между собой ряды предпочтительности, построенные каждым экспертом. Его значение находится в пределах $0 \leq W\leq 1; W = 0$, означает полную противоположность, а $W = 1$ — полное совпадение результатов ранжирования. Практически достоверность считается хорошей, если $W = 0,7 \div 0,8$.

В качестве одного из методов повышения согласованности экспертных оценок применяют метод «дельфийского оракула», или метод «Дельфи», на основе идей которого сформировался ряд модификаций.