Произведем предварительное ранжирование по заключениям экспертов. При этом каждый эксперт индивидуально осуществляет расстановку показателей по рангам с первого, представляющегося наиболее важным, до последнего, который, по мнению эксперта, наименее значим.

Среднее значение ранга по данным всех экспертов рассчитаем по формуле:

,         (1)

гдеь – ранг i-го показателя, назначенный j-м экспертом, m – количество экспертов.

Среднее квадратичное отклонение рангов i-го показателя от его среднего значения рассчитаем по формуле:

.         (2)

Далее осуществим выставление предварительных рангов по всем показателям по схеме:

    если некоторый -ранг является наименьшим, то ему присваивается ранг 1; выбираем следующий наименьший по величине ранг и назначаем ему предварительный ранг 2; далее следуя данной схеме, выбираем следующий наименьший по величине ранг и назначаем ему следующий предварительный ранг.

Результаты расчетов приведены в таблице 1.

2 Компетентность экспертов

Оценки экспертов в значительной степени определяются их квалификацией в данной области, то есть компетентностью. Определение компетентности экспертов выполняется по коэффициентам ранговой корреляции.

Коэффициент ранговой корреляции рассчитывается по формуле Спирмена:

,         (3)

где .

Таблица 1

Предварительное ранжирование показателей

Показатели

Эксперты

Предварительный ранг

1

2

3

4

5

6

D1. Обучаемость

8

8

9

8

9

10

8,67

0,08

8

D2. Простота использования

2

5

3

2

1

2

2,5

0,32

2

D3. Устойчивость к ошибке

4

2

5

5

6

5

4,5

0,32

5

D4. Правильность

1

4

2

4

2

1

2,33

0,31

1

D5. Изменяемость

10

9

10

10

8

8

9,17

0,14

10

D6. Характеристика

изменения ресурсов

7

10

6

1

7

6

6,17

1,43

7

D7. Стабильность

9

7

8

9

10

9

8,67

0,18

9

D8. Тестируемость

5

3

4

6

5

3

4,33

0,24

4

D9. Защищенность

3

1

1

3

3

4

2,5

0,25

3

D10. Пригодность

6

6

7

7

4

7

6,16

0,23

6


Коэффициент компетентности рассчитывается по формуле:

НЕ нашли? Не то? Что вы ищете?

.         (4)

Результаты вычислений сведены в таблицу 2.

Таблица 2

Значения величины , коэффициента ранговой корреляции,

коэффициента компетентности для 10 характеристик и 6 экспертов

Эксперты

Значение

D1

D2

D3

D4

D5

D6

D7

D8

D9

D10

1

4

9

4

1

9

16

0

25

25

25

0,29

0,13

2

0

0

4

16

9

0

9

9

1

0

0,71

0,18

3

4

9

4

4

9

9

1

1

0

4

0,73

0,18

4

9

0

1

1

4

9

1

4

1

1

0,81

0,19

5

1

0

1

1

4

1

1

4

1

4

0,89

0,19

6

0

9

16

1

25

9

0

25

16

4

0,36

0,14


Таким образом, наиболее компетентным следует признать 4-го и 5-го экспертов, затем идут 2-й и 3-й на одном уровне, 6-й и менее всех компетентен 1-й эксперт.

3 Повторное ранжирование показателей с учетом компетентности

  экспертов

Среднее значение ранга рассчитывается по формуле:

.         (5)

Результаты расчетов сведены в таблицу 3.

4 Определение согласия экспертов

Согласованность экспертов определим по методу Николаева – Темнова.

Построим матрицу вероятности по формуле:

,         (7)

где – количество экспертов, указавших i-му показателю k-е место по значимости. Матрица вероятности сведена в таблицу 4.

Таблица 3

Повторное ранжирование показателей

Показатели

Окончательный ранг

D1

8,73

0,13

8

D2

2,55

0,23

3

D3

4,57

0,23

5

D4

2,49

0,21

2

D5

9,13

0,16

10

D6

6,05

0,49

6

D7

6,19

0,17

7

D8

4,42

0,19

4

D9

2,23

0,19

1

D10

8,74

0,19

9


Таблица 4

Матрица вероятности для 10 мест и 10 показателей

Место

D1

D2

D3

D4

D5

D6

D7

D8

D9

D10

1

0

0,17

0

0,33

0

0,17

0

0

0,33

0

2

0

0,5

0,17

0,33

0

0

0

0

0

0

3

0

0,17

0

0

0

0

0

0,33

0,5

0

4

0

0

0,17

0,33

0

0

0

0,17

0,17

0,17

5

0

0,17

0,5

0

0

0

0

0,33

0

0

6

0

0

0,17

0

0

0,33

0

0,17

0

0,33

7

0

0

0

0

0

0,33

0,17

0

0

0,5

8

0,5

0

0

0

0,33

0

0,17

0

0

0

9

0,33

0

0

0

0,17

0

0,5

0

0

0

10

0,17

0

0

0

0,5

0,17

0,17

0

0

0


Из за большого объема этот материал размещен на нескольких страницах:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23