Вітчизняні досліди свідчать, що в цьому випадку існує проблема вибору міри, за допомогою якої можна оцінити близькість оцінок. У будь-якому випадку вибір заходи носить суб'єктивний характер. p align="justify"> Зарубіжні дослідження показали, що коефіцієнти вагомості у двох групах експертів однаковою чисельності, вклалися в рамки довірчого інтервалу.
Аналіз даних експертів, що мають різну професійну спрямованість (механіки й естети), показав, що 13 показників вагомості з 16 також вклалися в довірчий інтервал.
У деяких випадках, наприклад у торгівлі, мистецтві, літературі, музики та ін, експертні методи є основними або єдиними.
.3 Алгоритм, завдання і класифікація експертних методів
Серед існуючих численних методів отримання колективної експертної оцінки, Е. П. Райхман і Г. Г. Азгальдов рекомендують наступний алгоритм експертних операцій.
. Проводиться підготовчий етап:
формування робочої та експертної груп;
класифікація завдань (продукції і споживачів);
формування структурної схеми показників.
2. Етап отримання індивідуальних експертних оцінок:
прийняття процедури призначення оцінок експертами;
вибір методу отримання інформації від експертів і створення документів опитування (анкет, форм пояснювальних записок і т.д.);
проведення опитування експертів.
Етап обробки результатів та одержання колективних експертних оцінок:
узагальнення індивідуальних експертних оцінок;
формування принципів узгодженості індивідуальних експертних оцінок;
визначення оцінок об'єктивності колективних експертних оцінок.
Відповідно з цим алгоритмом можна сформувати наступні, далеко не рівноцінні завдання за важливістю і труднощі, які потрібно вирішувати в процесі проведення експертних досліджень.
. Завдання підготовчого етапу
.1. Розробка принципів формування робочої групи. Тут повинні бути вирішені наступні питання:
визначення функцій і структури робочої групи;
розподіл обов'язків між членами робочої групи;
визначення кількості членів робочої групи.
1.2. Розробка принципів формування експертної групи:
кількісне визначення якості експертів;