Определение компетентности экспертов, привлекаемых для проведения экспертизы

ОПРЕДЕЛЕНИЕ КОМПЕТЕНТНОСТИ ЭКСПЕРТОВ,

ПРИВЛЕКАЕМЫХ ДЛЯ ПРОВЕДЕНИЯ ЭКСПЕРТИЗЫ

Белый В.С., Середа Д.А.

В статье показан подход к оценке компетентности лиц, привлекаемых для проведения экспертизы. Представлен способ расчета показателей, характеризующих качество проведения экспертизы и её участников (коэффициент аргументации принимаемого экспертом решения, коэффициент знакомства эксперта с проблемой, коэффициент осведомленности компетентности эксперта, коэффициент компетентности эксперта).

Экспертные оценки представляют собой точки зрения  высококвалифицированных специалистов в определенных предметных областях – экспертов, сформулированные в виде оценок объекта в содержательной, качественной или количественной форме. Экспертные оценки формируются в процессе проведения экспертизы-исследования определенного объекта индивидуумом или группой компетентных специалистов с целью формирования информации об интересующих характеристиках, свойствах объекта, используемой при принятии решений.  Сущность метода экспертных оценок состоит в надлежащей организации специалистами-организаторами экспертиз проведения конкретной экспертизы с целью получения информации о суждениях экспертов по рассматриваемым объектам и ее последующей обработки для генерации обобщенных данных и новой информации.

Известны различные формы организации проведения экспертиз: индивидуальные и коллективные, одноуровневые и многоуровневые, с обменом информацией между экспертами и без него, анонимные, открытые. Вопрос формирования состава экспертной комиссии является весьма важным. Количественный и качественный состав экспертной комиссии должен формироваться с учетом широты проблемы, достоверности оценок, затрат ресурсов и характеристик экспертов. Широта решаемой проблемы, определяемая количеством различных аспектов, связана с установлением нижней границы количественного состава экспертной комиссии, то есть количество экспертов должно быть в комиссии таковым, чтобы каждый аспект, направление исследования было закреплено как минимум за конкретным специалистом. Достоверность оценок связана с уровнем знаний экспертов и их количеством. При соответствующем уровне знаний увеличение количества членов экспертной комиссии должно приводить к возрастанию достоверности результатов экспертизы. Величину располагаемых ресурсов на проведение экспертизы с учетом пропорциональности количеству привлекаемых экспертов следует использовать при определении верхней границы количественного состава экспертной комиссии. Таким образом, указанные ориентиры в конкретных случаях позволяют определиться с количественным составом экспертной комиссии.

Характеристики группы экспертов, включаемых в экспертную комиссию, определяются на основе индивидуальных их характеристик, в первую очередь, компетентности. Компетентность – это обладание определенными знаниями, позволяющее индивидууму высказывать суждения по определенному кругу вопросов. Степень компетентности может характеризоваться коэффициентом компетентности. Компетентность эксперта определяется структурой и весомостью аргументов, послуживших ему основанием  для ответа на поставленные вопросы, уровнем его осведомленности в рассматриваемой области знаний и уровнем знакомства с обсуждаемой проблемой.

Структура аргументов учитывается коэффициентом аргументированности (Карг), который соответствует формализованным сведениям о характере источников аргументации и о степени влияния каждого источника на принимаемые экспертом решения и рассчитывается следующим образом.

  Формируется анкета, представленная в таблице 1, где по вертикали содержатся источники аргументации, а по горизонтали оценка степени влияния на мнение экспертов источников аргументации.

    Таблица 1 - Анкета оценки степени влияния на мнение экспертов

источников   аргументации

 Таблица 2 - Анкета количественной оценки степени влияния на мнение  экспертов источников аргументации

Таблица 2 уже имеет определенные числовые значения компетентности эксперта. По источникам аргументации она соответствует таблице 1.  После этого в клетке табл. 1, отмеченные экспертами знаком «+», заносятся числовые значения соответствующих клеток табл. 2, сумма которых дает коэффициент аргументированности (Карг).

                                     Карг  I =,                                                  (1)

где yj – оценка, отмеченная экспертом по j-ому вопросу аргументации

Коэффициент степени знакомства (Кз)   учитывает степень знакомства эксперта с рассматриваемой проблемой и равен нормированному (умноженному на 0,1) значению соответствующей оценки, данной экспертом. Каждый эксперт отмечает степень своего знакомства на шкале, имеющей вид:

                                  0 1 2 3 ….. 10                                                            (2)

Степень осведомленности эксперта в обсуждаемых вопросах учитывает коэффициент осведомленности (Косв). Он соответствует формализованным сведениям об осведомленности эксперта по каждому из обсуждаемых вопросов. Числовое значение данного коэффициента определяется путем наложения табл.3 на аналогичную таблицу с отмеченным i-ым экспертом клеткам и последующим суммированием записанных в данных клетках чисел.

Коэффициент Косв для i-го  эксперта определяется по формуле

                                   Косв = ,                                                          (3)

где ri -  оценка, отмеченная экспертом по i-ому вопросу осведомленности .

Таблица 3 – Числовые оценки, соответствующие различным степеням осведомленности эксперта

Коэффициент компетентности эксперта определяется как среднее арифметическое коэффициентов аргументации, осведомленности и знакомства с исследуемой проблемой.

                        Ккомп   = .                                                         (4)

Если коэффициент компетентности эксперта Ккомп < 0,7 , то к дальнейшему обсуждению проблемы эксперт не привлекается.

Выводы:

1. Достоверность оценок, полученных в результате экспертного опроса, связана с компетентностью привлекаемых экспертов и их количеством. При соответствующем уровне компетентности увеличение количества членов экспертной комиссии должно приводить к возрастанию достоверности результатов экспертизы.
2. Компетентность эксперта определяется структурой и весомостью аргументов, послуживших ему основанием  для ответа на поставленные вопросы, уровнем его осведомленности в рассматриваемой области знаний и уровнем знакомства с обсуждаемой проблемой.

Литература:

1. Анфилатов В.С., Емельянов А.А., Кукушкин А.А. Системный анализ в управлении – М.: Финансы и статистика, 2002. – 325 с.

2.        Елтаренко Е.А., Крупинова Е.К.. Обработка экспертных оценок. – М.: МИФИ, 1982. – 49 с.

3. Мыльник В.В., Титаренко Б.П., Волочиенко В.А. Исследование систем управления. – М.: Академический Проект, 2003. – 176 с.