КТО ТАКИЕ ЭКСПЕРТЫ?
« … эксперты — высококвалифицированные специалисты в определенной области деятельности» [1].
« … эксперт должен быть компетентным в данной области знаний, т.е. являться признанным специалистом … » [2]
ТРЕБОВАНИЯ К ЭКСПЕРТАМ
Некоторые общие требования к экспертам [3]:
- компетентность в исследуемой области,
- эрудированность в смежных областях,
- учёная степень, звание,
- стаж научной или практической работы в определённой сфере,
- должностное положение,
- принципиальность,
- объективность и независимость,
- способность творчески мыслить
- интуиция,
- креативность,
- эвристичность,
- предикаторность,
НЕПРИМЕНИМОСТЬ ЭКСПЕРТНЫХ МЕТОДОВ
Экспертный метод не должен применяться, если имеются аналитические или экспериментальные методы, с помощью которых проблема может быть решена более точно [4].
ПРОБЛЕМЫ ЭКСПЕРТНЫХ МЕТОДОВ
Проблемы экспертных опросов заключаются в следующем:
| Проблема | Содержание |
| Сложность организации экспертизы | отбор экспертов в достаточном количестве и «качестве» и проведения опроса |
| Сложность формирования окончательной экспертизы | согласования полученных данных, их анализа и интерпретации |
| Возможная субъективность экспертов | эксперты могут находиться в плену своих представлений и неохотно пересматривать свою точку зрения, даже если она неправильная |
| Высокая стоимость проведения опроса | оплата труда экспертов,
расходы на организацию и проведение экспертизы |
ОБЩИЕ ТРЕБОВАНИЯ К ОПРЕДЕЛЕНИЮ ЧИСЛА ЭКСПЕРТОВ
В соответствии с [5], [6] при определении необходимого количества экспертов необходимо руководствоваться, в частности, следующими соображениями:
«Количество экспертов зависит как от допустимого уровня затрат на экспертизу, так и от заранее заданных параметров, характеризующих точность и достоверность результатов экспертизы допустимой погрешности и от доверительной вероятности, с которой эта оценка определена».
«В ходе определения количества экспертов необходимо учитывать, что при малом их числе появляется излишнее влияние оценки каждого эксперта, а при большом числе трудно вырабатывать единое мнение и снижается роль крайнего мнения, которое не всегда может быть ошибочным».
«Число экспертов должно быть достаточно большим, чтобы отдельные мнения не имели неправомерно большое значение. Однако при резком увеличении числа экспертов в группе снижается уровень их компетентности, что может существенно снизить точность экспертных оценок».
НЕОБХОДИМОЕ ЧИСЛО ЭКСПЕРТОВ
В соответствии с [8], количество экспертов должно быть не менее трех человек
Несколько статистических методов определения количества экспертов рассмотрены в [7]. В частности, для вариации 50%, ошибки среднего 20% и вероятности 0,80 – 0,90 минимально количество экспертов должно составлять 10 – 17 чел. в предположении распределения оценок экспертов по распределению Стьюдента или по гамма – распределению.
В соответствии с [9], минимальное количество экспертов определяется по формуле
N = 0,5 x (3 : a + 5)
где
а – параметр, задающий уровень ошибки экспертизы.
Исходя из этого условия минимальное количество экспертов равно 4 при а = 1 и 17 — 18 при а = 0,1.
В соответствии с [10], как правило, для группового оценивания необходимо привлечение не менее 7 – 9 экспертов.
Согласно [11], эмпирическим путем установлено, что эксперты в количестве 13 — 15 человек могут рассматриваться как достаточно представительная группа.
В результате можно заключить, что для получения достоверного результата экспертного оценивания в соответствии с разными источниками рекомендуемое количество экспертов должно составлять 10 — 20 человек, лучше — 15 — 20 человек.
[1] Экспертный опрос. Материал из Википедии — свободной энциклопедии, https://ru.wikipedia.org/wiki/Экспертный_опрос#:~:text=Материал%20из%20Википедии%20—%20свободной,анализе%20и%20решении%20рассматриваемой%20проблемы
[2] Крянев А.В., Семенов С.С. (2013), К вопросу о качестве и надёжности экспертных оценок при определении технического уровня сложных систем, Журнал «Надежность», №4(47), https://www.dependability.ru/jour/article/viewFile/34/98
[3] Экспертный опрос. Материал из Википедии — свободной энциклопедии, https://ru.wikipedia.org/wiki/Экспертный_опрос#:~:text=Материал%20из%20Википедии%20—%20свободной,анализе%20и%20решении%20рассматриваемой%20проблемы
[4] Экспертные методы товарной экспертизы, https://www.myunivercity.ru/Товароведение/Экспертные_методы_товарной_экспертизы/79975_1509162_страница2.html#:~:text=Экспертный%20метод%20не%20должен%20применяться%2C,результаты%20с%20приемлемой%20степенью%20точности
[5] Количество экспертов, Энциклопедия по экономике, https://economy-ru.info/info/183561/
[6] Крянев А.В., Семенов С.С. (2013), К вопросу о качестве и надёжности экспертных оценок при определении технического уровня сложных систем, Журнал «Надежность», №4(47), https://www.dependability.ru/jour/article/viewFile/34/98
[7] Рупосов В.Л.(2015), Методы определения количества экспертов, Вестник Иркутского ГТУ, №3 (98), https://cyberleninka.ru/article/n/metody-opredeleniya-kolichestva-ekspertov
[8] ГОСТ Р 66.9.04-2017. Оценка опыта и деловой репутации охранных организаций, https://docs.cntd.ru/document/1200145326
[9] Литвак Б.Г. (1996), Экспертные оценки и принятие решений, М.: Патент; Чернышева Т.Ю. (2009), Иерархическая модель оценки и отбора экспертов, Доклады ТУСУРа, №1 (19), часть 1, https://cyberleninka.ru/article/n/ierarhicheskaya-model-otsenki-i-otbora-ekspertov
[10] Саати Т. (1993), Принятие решений. Метод анализа иерархий / пер. с англ. — М. : Радио и связь, Андрейчиков А.В. Андрейчикова О.В. (2000), Анализ, синтез, планирование решений в экономике, М. : Финансы и статистика
[11] Крянев А.В., Семенов С.С. (2013), К вопросу о качестве и надёжности экспертных оценок при определении технического уровня сложных систем, Журнал «Надежность», №4(47), https://www.dependability.ru/jour/article/viewFile/34/98