Комплексный анализ ситуаций при принятии руководителем качественных управленческих решений

ИССЛЕДОВАНИЕ

Дюйзен Е.Ю.1

1 Хабаровская государственная академия экономики и права

Комплексный анализ ситуаций при принятии руководителем качественных управленческих решений

АННОТАЦИЯ:

В статье отражено исследование эффективности методов работы экспертных групп и их формирования. Рассмотренный алгоритм экспертной оценки позволяет утверждать, что работа по формированию экспертной комиссии является трудоемким, сложным и многоэтапным процессом. При этом пока не определены единые правила по проведению экспертной работы. Для повышения эффективности экспертной деятельности предложено использовать коэффициент компетентности кандидата, а также коэффициент стабильности его работы.

Рассмотренный подход дает возможность формализовать процессы сбора, анализа, обработки мнений экспертов с преобразованием полученной информации в наиболее приемлемую и удобную форму. Однако данный метод не заменяет количественный анализ, он лишь выступает как дополнение к применению более точных методов.

КЛЮЧЕВЫЕ СЛОВА: экспертиза; экспертная группа; рабочая группа; экспертная оценка

JEL: D70, J24, M12

ДЛЯ ЦИТИРОВАНИЯ:

Дюйзен, Е.Ю. (2015). Комплексный анализ ситуаций при принятии руководителем качественных управленческих решений. Лидерство и менеджмент, 2(1), 19-34. doi: 10.18334/lim.2.1.547

Дюйзен Екатерина Юрьевна, аспирантка 2-го года обучения по направлению «Экономика и управление народным хозяйством», старший преподаватель кафедры экономики предприятия и менеджмента, Хабаровская государственная академия экономики и права

ПОСТУПИЛО В РЕДАКЦИЮ: 15.01.2015 / ОПУБЛИКОВАНО: 30.03.2015 ОТКРЫТЫЙ ДОСТУП: http://dx.doi.Org/10.18334/lim.2.l.547 (с) Дюйзен Е.Ю. / Публикация: ООО Издательство "Креативная экономика"

Статья распространяется по лицензии Creative Commons CC BY-NC-ND

ЯЗЫК ПУБЛИКАЦИИ: русский

Metadata in English is available.

For detailed information, please, visit http://dx.doi.org/10.18334/lim.2.1.547

В процессе развития производства и управления возникает потребность в качественных управленческих решениях. Для повышения их обоснованности с учетом факторов, влияющих на результаты, необходим комплексный разносторонний анализ, включающий в себя как количественную, качественную оценку, так и учет суждений специалистов по рассматриваемому вопросу.

Отметим, что экспертное оценивание вносит степень субъективности в полученные результаты, однако на сегодняшний день это безальтернативный метод (Алексеев, 2010; Беседин, Нагаева, 2008; Бухарин, Мельников, 2011; Готовцева, Конторусова, 2014; Гусев, 2013; Ермаков, 2013; Жиляков, Путивцева, Щербинина, 2007; Журавлева, 2012; Киреев, Зенин, 2015; Киреев, Моисеев, 2014; Лисенков, Сербиненко, Кузнецов, 2011; Муравецкий, Тараканов, 2014; Недашковская, 2014; Пернаривский, Орловская, 2011; Погодаев, Глухов, 2006; Радаев, 2007; Резникова, Микиртичан, 2011; Чегодаев, 2010; Шишкина, 2013; Fu, Yang, Yang, 2015; Li, 2013; Metz, 2013; Neshati, Beigy, Hiemstra, 2014; Yue, 2012). Очевидным является тот факт, что от точности и обоснованности выбора частных показателей, установления эталонных значений и интерпретации полученных результатов зависят достоверность полученных выводов и возможность их использования на практике (Федореев, 2005).

Формируем комиссию

Детальное исследование публикаций позволило убедиться в том, что работу по формированию экспертной комиссии можно обоснованно считать трудоемким, сложным и многоэтапным процессом1. Дело усложняется тем, что до настоящего времени не определены единые правила по проведению такого рода экспертизы. В результате изучения наиболее распространенных подходов к экспертному оцениванию предлагаем следующий алгоритм (см. рис.).

Первоочередной задачей подготовительного этапа является назначение руководителя экспертной комиссии, осуществляющего общее руководство по работе экспертной комиссии и ответственного за интерпретацию получаемых результатов2. Как правило, возглавляет экспертную комиссию непосредственно представитель управляющего

1 Михненко, П.А. (2007). Секреты эффективных бизнес-решений. М.: NTPress.

2 Малин, А.С., Мухин В.И. (2005). Исследование систем управления. М.: ИД ГУ ВШЭ.

аппарата, одновременно являющийся инициатором проведения анализа по заданной проблеме. В его обязанности входит определение цели и задач по формированию экспертной группы.

1 . Подготовительный этап

Определение pvкoБoдитeля экспертной комиссии

Определение цели и задачи экспертного анализа

Формирование экспертной группы: - сост авл енпе исх одного пер ечня кандидатов; - формирование расширенного списка кандидатов: - определение коз ффициент а компетентности кандидатов: - опре д ел енпе числ енно с гизкспертноигруппы: - окончательное определение состав а зкспертнои группы.

Определение состава рабочей группы

2. Информационный этап

Определение методов сбора информации

Определение типов шкал

Определение способов измерения объектов

_ Разработка форм получения экспертных данных

3. Экспертное оценивание

4. Обработка результатов

5. Опреде~гение согласованности мнений экспертов

6. Интерпретация полученных результатов

Рисунок. Алгоритм экспертной оценки

На наш взгляд, имеет смысл включить в экспертную комиссию экспертную и рабочие группы. Рабочая группа включает в себя технических исполнителей, основными функциями которых является проведение работ по подготовке материалов, информированию, обработке результатов, составлению анкет, сбору информации и т. д. Экспертная группа состоит из специалистов, обладающих необходимыми теоретическими знаниями и практическим опытом по решаемой проблеме. Если формирование рабочей группы не составляет особой сложности, то работа по формированию экспертной группы требует большего внимания, поскольку правильный подбор экспертов позволяет снизить субъективизм будущих оценок, и в конечном счете самих результатов. Как уже было отмечено, состав экспертной группы определяется необходимостью привлечения специалистов из разных отделов организации в зависимости от целей проведения экспертного анализа.

Измерение коэффициентов

Руководитель экспертной комиссии формирует исходный список кандидатов экспертной группы. Затем проводится корректировка исходного списка путем включения специалистов, изъявивших желание участвовать в работе экспертной группы и отобранных руководителем. После получения полного списка кандидатов, проводится анализ их компетентности с использованием метода самооценки. Коэффициент компетентности кандидата определяется по формуле:

к.

К =

где К£1 - коэффициент информированности 1-го кандидата; К¿2 - коэффициент индивидуальных качеств 1-го кандидата; К^3 - коэффициент стабильности работы 1-го кандидата; К^4 - коэффициент согласованности мнения 1-го кандидата с мнением предварительно сформированной экспертной группы.

Для расчета первых трех коэффициентов кандидаты используют балльные оценки, значение которых варьируется по шкале от 0,1 до 1, где 1 - это максимальный балл.

Коэффициент информированности определяется по данным, представленным в таблице 13. Данный показатель отражает, какие источники информации и в какой степени влияют на мнение 1-го кандидата при принятии им решений.

Таблица 1

Исходные данные для оценки коэффициента информированности

Источники аргументации Оценка в баллах

Исследования отечественных ученых

Исследования зарубежных ученых

Практический опыт

Интуиция

Опыт решения приближенной по содержанию проблемы

Итого п

Коэффициент, отражающий характеристики индивидуальных качеств кандидата, также необходимо учитывать при определении компетентности. В ряде работ (А.И. Афоничкин, О. С. Кошелев, Л.И. Лукичева и др.) показано, что на эффективность экспертного оценивания непосредственно влияют личные характеристики экспертов, наиболее значимыми среди которых выступают умение работать в команде, объективное оценивание ситуации и т. д.4. В результате их исследования для оценки были выделены 5 обязательных индивидуальных качеств экспертов (см. табл. 2).

Таблица 2

Исходные данные для оценки коэффициента индивидуальных качеств кандидата

Индивидуальные качества кандидата Оценка в баллах

Способность формировать и поддерживать благоприятный социально-психологический климат в коллективе

Способность работать в команде

Способность оперативно принимать решения

Организованность и пунктуальность

Объективность при принятии решений

Итого п

3 Михненко, П.А. (2007). Секреты эффективных бизнес-решений. М.: NTPress.

4 Афоничкин, А.И., Михаленко, Д.Г. (2008). Управленческие решения в экономических системах. СПб: Питер.

Подчеркнем, что и К^2 рассчитываются по формуле средней арифметической:

Кп,2 = Щг1,

где О ¿у - оценка в баллах 1-го кандидата по ]-му критерию.

Коэффициент стабильности работы предлагаем принимать в зависимости от стажа работы кандидата (см. табл. 3).

Таблица 3

Данные для определения стабильности работы кандидата

Стаж работы Оценка в баллах

более 15 лет 1,0

10-15 лет 0,8

5-10 лет 0,6

1-5 лет 0,4

1 год 0,2

Следует отметить, что стаж работы учитывается в отношении организации, где работает кандидат на данный момент времени. Кандидат просто выделяет необходимое поле, которому соответствуют обозначенные баллы.

При определении коэффициента согласованности мнений воспользуемся формулой5:

^¿4 = 1-

' ср

где 7у — ранг, присвоенный ]-ым кандидатом в отношении определенного объекта;

гср — средний ранг определенного объекта, полученный в результате проведения тестового опроса всеми кандидатами.

Расчет данного коэффициента основан на проведении тестового опроса с просьбой проранжировать объекты по степени их влияния на какой-либо показатель. Соответственно, если ранг 1-го кандидата значительно отличается от группового среднего ранга, то и значение К^4 будет стремиться к 0, в противном случае оно будет приближено к 1.

ri ГсР

5 Зерний, Ю.В., Полываный, А.Г., Якушин, А.А. (2011). Управление качеством в приборостроении. М.: Новый центр.

Градация значений коэффициента компетенции определяет его уровни: 0,9-1,0 свидетельствует о максимальном уровне компетентности, 0,8-0,9 - высоком, 0,7-0,8 - уровень компетенции выше среднего, 0,6-0,7 - средний, 0,5-0,6 - ниже среднего и менее 0,5 -низкий. Очевидно, что кандидаты с низким, ниже среднего, а также средним уровнем компетентности исключаются из списка претендентов. За сбор информации, обработку собранных данных отвечает рабочая группа, предоставляющая результаты руководителю экспертной комиссии.

Где минимум, а где максимум

После того как установлен уровень компетентности кандидатов, необходимо определить численный состав экспертной группы. В теории существуют некоторые подходы к определению числа экспертов в составе группы. Так, по мнению Е. Марголина, специалиста в области экспертных оценок, число экспертов должно быть больше, чем количество объектов оценивания6. Данный подход является довольно простым, без конкретного обоснования. Ряд авторов утверждает, что количество экспертов в группе должно быть от 7 до 20 человек7. Другие придерживаются пределов от 10 до 308. Однако объединяет исследователей одна общая позиция: слишком малое количество экспертов в группе приводит к недостоверным результатам, а слишком большое - к проблемам организационного характера.

Согласно принципу Гештальта, численность экспертной группы не должна превышать 10 человек. Мы в полной степени согласны с данным принципом. Если количество экспертов будет превышать 10 человек, то станет сложным согласовывать их мнения, возникнут сложности организационного характера. Очевидно, что не все кандидаты после определения уровня компетентности будут включены в окончательный список. Представляется достаточно проблематичным определить точную численность экспертов. Однако следуя законам логики, можно определить минимальное и максимальное количество. Минимальное количество вполне может быть определено численностью экспертов, имеющих максимальное значение коэффициента

6 Марголин, Е. М. (2006). Методика обработки данных экспертного опроса. Полиграфия, 5, 14-16.

7 Зерний, Ю.В., Полываный, А.Г., Якушин, А.А. (2011). Управление качеством в приборостроении. М.: Новый центр.

8 Жуков, Б.М., Ткачева, Е.Н. (2014). Исследование систем управления. М.: Дашков и К.

компетентности. Максимальную же границу предлагаем определять на

основе выражения9:

ш< —,

где т* - общее количество кандидатов;

Qmax - значение максимального коэффициента компетентности;

Qi - компетентность 1-го эксперта.

К окончательному решению

После определения количества экспертов руководитель комиссии формирует окончательный список экспертной группы.

Второй этап по формированию экспертной комиссии является не менее значимым. Он включает в себя работу по определению методов сбора информации, типов оценочных шкал и способов измерения объектов.

Общепринятыми способами сбора мнений экспертов является «мозговой штурм», деловые игры, дискуссии, метод «Дельфи», метод комиссий и др. Наименее затратными и простыми в организации, на наш взгляд, являются анкетирование и опрос.

Система правил измерения объектов (явлений) позволяет преобразовать полученную от экспертов информацию в удобную для дальнейшего анализа форму. Традиционно тот или иной тип шкалы

и и гр «_»

определяется системой предпочтений экспертов. Так, наиболее простой является номинальная шкала. Она основана на сравнении объектов (явлений) с эталоном и упорядочении их по двуноминальной шкале, при этом присваиваемый балл равен 0 или 1. Шкала отношений используется при наличии абсолютного свойства объекта, когда известна нулевая точка, например размер прибыли при выпуске нового продукта. Мы рекомендуем использовать при экспертном оценивании порядковую и интервальную шкалы. Данный выбор объясняется тем, что они имеют преимущество по сравнению с другими и наиболее часто используются при проведении экспертных оценок. Это обусловлено тем, что, например, при номинальной шкале возможны только два варианта: «да» или «нет», что сужает рамки оценивания. А с помощью шкалы

9 Петров, А.Ю. (2010). Интегральная методика оценки коммерческого потенциала инвестиционного продукта. М.: Московский печатник.

отношений определяются количественные характеристики, которые могут быть получены и расчетным путем.

Следующий шаг заключается в определении способа измерения объектов. При работе с порядковой и интервальной шкалой, как правило, используются ранжирование, парное сравнение и непосредственная оценка. Поскольку экспертное оценивание не предполагает анализа большого числа объектов, а различие между оцениваемыми объектами является довольно значительным, то нерационально использовать способ парного сравнения при исследовании ресурсного потенциала организации. Соответственно, оптимальными методами является ранжирование и непосредственная оценка. Сущность ранжирования сводится к выбору наиболее существенного объекта из исследуемой совокупности и расположения объектов в порядке убывания (возрастания). Ранги могут принимать значение от 1 до п, при этом значение самого важного ранга равно 1. Необходимо подчеркнуть, что, по мнению экспертов, если несколько оцениваемых объектов имеют одинаковую важность, то ранги присваиваются таким образом, чтобы сумма оставалась неизменной. Например, если объекты 2 и 3 считаются одинаковыми по значимости, то им необходимо присвоить ранг 1,5 и т.п.

Непосредственная оценка не просто упорядочивает, но и определяет, насколько один объект более важен, чем другой, посредством интервалов, которым соответствуют баллы, например от 0 до 5, от 1 до 10 и т. д. Ранжированию соответствует порядковая шкала, а способу непосредственных оценок - интервальная.

Этап экспертного оценивания заключается в непосредственном сборе мнений экспертов и их отборе с применением выбранных методик.

С целью определения достоверности результатов полученных оценок необходимо определить согласованность мнений экспертов. Другими словами, полученные мнения экспертов имеют дальнейшее практическое применение только в том случае, если они являются согласованными.

Так, для определения согласованности мнений экспертов используются статистические характеристики - меры разброса. Наиболее распространенным параметром является коэффициент вариации. Его мы используем при обработке результатов, полученных в ходе анкетирования при оценке организационного

и предпринимательского потенциалов. Традиционно данный коэффициент рассчитывается по формуле10:

у = ^ * 100%,

X

где СКО - среднее квадратическое отклонение, определяемое по формуле:

СКО = 1 ' ,

т

где т - количество экспертов; - оценка ]-го эксперта;

х - средняя оценка группы экспертов.

Преобразуя данную формулу для балльных оценок, получим следующее выражение:

V =

_ л

* 100%,

Вгр

где В,- - средний балл 1-го эксперта в отношении ]-го объекта, рассчитываемый по формуле:

В = ^

где В ¿у - баллы 1-го эксперта в отношении ]-го объекта;

- число экспертов, оценивающих ]-ый объект; Вгр - средний балл по группе.

Полученное значение коэффициента вариации характеризует долю среднего значения этой величины, составляющей ее средний разброс11. Оно не имеет четких границ, однако очевидным является то, что большое значение данного коэффициента характеризует сильное изменение признака. Эмпирическим путем установлено, что до 10% -слабое изменение; от 10 до 25% - умеренное изменение; и свыше 25% -высокое изменение. В теории статистики данное значение несколько выше, и принято считать, что если оно превышает 35%, это свидетельствует о неоднородности оценок экспертов.

10 Елисеева, А.А. (2015). Статистика. М.: Проспект.

11 Там же.

В случае использования метода ранжирования, необходимо рассчитать коэффициент конкордации. В случае если все ранги различны, то используется следующая формула12:

12 1

Ш = 12 * ,

к2

где Б =

Я^] - ранг 1-го объекта оцениваемого ]-ым экспертом;

п - количество объектов;

к - количество экспертов.

Если хотя бы один эксперт выставил одинаковые ранги, то формула примет вид:

Ш =-—-,

где Т} - присутствие в анкете ]-го эксперта одинаковых рангов; рассчитывается по формуле:

ъ =ггЧ\

} 12 у '

где т.] - количество групп одинаковых рангов в анкете ]-го эксперта;

- количество рангов в г-й группе одинаковых рангов в анкете ]-го эксперта.

Значение коэффициента может принимать значение от 0 до 1. Чем ближе значение к единице, тем более согласованными являются мнения экспертов. О высокой согласованности свидетельствует значение более 0,8.

Выводы

Таким образом, представленный подход к проведению экспертных оценок позволяет формализовать процессы сбора, анализа, обработки мнений экспертов с преобразованием полученной информации в наиболее приемлемую и удобную форму. С целью

12 Шмойлова, Р.А. (2007). Теория статистики (4-е изд., перераб. и доп.). М.: Финансы и статистика.

получения наиболее объективной информации необходимо уделить большое внимание составу комиссии, поскольку от наличия специализированных мнений экспертов в определенной области будет зависеть и объективность получаемой информации.

Не стоит, однако, забывать, о том, что данный метод не может заменить количественный анализ, он лишь дополняет картину и в то же время является безальтернативным вариантом в случае невозможности применения более точных методов.

& возглавляет экспертную комиссию непосредственно представитель управляющего аппарата, одновременно являющийся инициатором проведения анализа по заданной проблеме

& состав экспертной группы определяется необходимостью привлечения специалистов из разных отделов организации в зависимости от целей проведения экспертного анализа

& на эффективность экспертного оценивания непосредственно влияют личные характеристики экспертов, наиболее значимыми среди которых выступают умение работать в команде, объективное оценивание ситуации и т. д.

& слишком малое количество экспертов в группе приводит к недостоверным результатам, а слишком большое - к проблемам организационного характера

& по мнению экспертов, если несколько оцениваемых объектов имеют одинаковую важность, то ранги присваиваются таким образом, чтобы сумма оставалась неизменной

& полученные мнения экспертов имеют дальнейшее практическое применение только в том случае, если они являются согласованными

& данный метод не может заменить количественный анализ, он лишь дополняет картину

ИСТОЧНИКИ:

Алексеев, А.А. (2010). Формирование стратегического подхода к управлению на современном промышленном предприятии с использованием методов экспертного оценивания и многомерного статистического анализа. Системы и средства связи, телевидения и радиовещания, 1-2, 105-107.

Беседин, Н.А., Нагаева, Г.А. (2008). Использование метода экспертного оценивания

ситуаций при подготовке специалистов по финансам. Bîchuk Дшпропетровського державного аграрного ун'верситету, 1, 115-117.

Бухарин, С.В., Мельников, А.В. (2011). Экспертная оценка финансовых показателей ликвидности и платежеспособности. Конкурентоспособность. Инновации. Финансы, 1, 74-79.

Готовцева, Л.А., Конторусова, С.С. (2014). Роль экспертных методов при разработке управленческих решений. Образование в XXI веке: путь к новым кризисам? Материалы II международной научно-практической конференции (С. 72-76). Саратов: ООО «Центр профессионального менеджмента «Академия Бизнеса».

Гусев, В.Б. (2013). Рефлексивный метод экспертного оценивания проблемных сторон государственно-частного партнерства. Проблемы управления безопасностью сложных систем. Труды XXI Международной конференции (С. 65-69). Москва: Российский государственный гуманитарный университет.

Ермаков, С.В. (2013). Экспертное оценивание как основа построения метода

формализованной оценки сложности навигационной ситуации. Вестник государственного университета морского и речного флота им. адмирала С.О. Макарова, 2, 122-128.

Жиляков, Е.Г., Путивцева, Н.П., Щербинина, Н.В. (2007). Вариационный метод решения обратной задачи экспертного оценивания при парных сравнениях. Вопросы радиоэлектроники, 2(4), 142-155.

Журавлева, В.А. (2012). Метод экспертного оценивания: историческая экспликация и современная модель. Вестник Российского университета дружбы народов. Серия: Социология, 2, 28-38.

Киреев, Ю.В., Зенин, А.Ю. (2015). Экспертное оценивание методом парных сравнений с использованием модели Раша измерения латентных переменных. Научный вестник Воронежского государственного архитектурно-строительного университета. Серия: Управление строительством, 2, 86-89.

Киреев, Ю.В., Моисеев, С.И. (2014). Экспертное оценивание качественных показателей методом Раша. Конкурентоспособность. Инновации. Финансы, 1, 83-88.

Лисенков, А.Н., Сербиненко, Д.В., Кузнецов, И.В. (2011). Формализация и экспертное оценивание объектов управления в задачах энергосбережения. Управление качеством в нефтегазовом комплексе, 2, 26-29.

Муравецкий, А.Н., Тараканов, А.М. (2014). Использование методов экспертного

оценивания в банковской деятельности. Вестник Российского университета дружбы народов. Серия: Экономика, 1, 83-90.

Недашковская, Н.И. (2014). Принятие решений при согласованных экспертных оценках первых сравнений. Системн дослiдження та iнформацiйнi технологи, 4, 35-44.

Пернаривский, А.В., Орловская, Ю.Н. (2011). Использование экспертных методов при оценивании системного риска в банковской деятельности. Труды Одесского политехнического университета, 3, 52-57.

Погодаев, А.К., Глухов, А.И. (2006). Применение методов экспертного оценивания

деятельности предприятий. Информационные технологии моделирования и управления, 7, 800-806.

Радаев, Н.Н. (2007). Точность экспертного оценивания состояния объекта методом

попарных сравнений с количественной оценкой предпочтений. Измерительная техника, 9, 6-11.

Резникова, Н.П., Микиртичан, А.Г. (2011). Уменьшение неопределенности результата при обработке и анализе экспертных оценок. T-Comm: Телекоммуникации и транспорт, 5(12), 78-82.

Федораев, С.В. (2010). Инновационный потенциал: содержание, структура, методика оценки. Научно-аналитический журнал «Вестник Санкт-Петербургского университета Государственной противопожарной службы МЧС России», 6(2), 23-31.

Чегодаев, А.И. (2010). Математические методы анализа экспертных оценок. Вестник Самарского государственного экономического университета, 2, 130-135.

Шишкина, Н.А. (2013). Роль и значение метода экспертных оценок в системе оценивания качества инновационных проектов. Вестник Красноярского государственного аграрного университета, 2, 162-165.

Fu, C., Yang, J., Yang, S. (2015). A group evidential reasoning approach based on expert reliability. European Journal of Operational Research, 246(3), 886-893. doi: 10.1016/j.ejor.2015.05.042

Li, M. (2013). Individual novices and collective experts: Collective scaffolding in wiki-based small group writing. System, 41(3), 752-769. doi: 10.1016/j.system.2013.07.021

Metz, J. (2013). Expert groups in the European Union: A sui generis phenomenon?. Policy and Society, 32(3), 267-278. doi: 10.1016/j.polsoc.2013.07.007

Neshati, M., Beigy, H., Hiemstra, D. (2014). Expert group formation using facility location analysis. Information Processing & Management, 50(2), 361-383. doi: 10.1016/j.ipm.2013.10.001

Yue, Z. (2012). Approach to group decision making based on determining the weights of experts by using projection method. Applied Mathematical Modelling, 36(7), 2900-2910. doi: 10.1016/j.apm.2011.09.068

Ekaterina Yu. Duizen, 2nd year postgraduate of "Economics and national economy management", Senior Lecturer of the Chair of corporate economics and management, Khabarovsk State Academy of Economics and Law

Complex analysis of the situation at making of well-considered decisions by top-managers

ABSTRACT:

The article discusses the efficiency of work methods of expert groups and methods for the formation thereof. The considered algorithm of expert evaluation allows to state that the formation of an expert group is a labor-intensive, complex and multi-staged process. At that, no unified regulations for the expert group work have been developed so far. To improve the efficiency of expert work it has been proposed to use the job candidate competence coefficient and the coefficient of the stability of his work.

The considered approach enables to formalize the processes of collection, analysis and processing of expert opinions with subsequent translation of the obtained information into a form more convenient and practical. However, this method is not a substitute for the quantitative analysis, but rather a supplement to more precise methods. KEYWORDS: expertise; expert group; work team; expert evaluation