|
144 оценке уровня их компетенции, а затем, при подведении результатов экспертизы, считать их всех равнокомпетентными. После того, как группа экспертов сформирована, приступают к проведению экспертного опроса. Проведение экспертного опроса включает ряд правил и условий, в число которых входят: независимость формирования экспертами собственного мнения об оцениваемых событиях; удобство работы с предлагаемыми анкетами (вопросы должны формулироваться в общепринятых терминах и должны исключать всякую смысловую неоднозначность); логическое соответствие вопросов структуре объекта исследования; приемлемые затраты времени на ответы по вопросам анкеты, удобное время получения вопросов и выдачи ответов; сохранение анонимности ответов для членов экспертной группы; предоставление экспертам требуемой информации. По завершению проведения экспертного опроса определяется согласованность мнений экспертов в соответствии с математическими процедурами [49, 85, 86, 99, 135, 136, 167]. Установление согласованности мнений экспертов основывается на ранжировании полученных оценок. При использовании рангов важности (ранжировании) невозможно установить, насколько один результат лучше другого, можно определить только ряд предпочтения рассматриваемых результатов. В качестве меры согласованности мнений экспертов принимается коэффициент копкордации Кендалла (W), величина которого изменяется в пределах от 0 до 1. При W = 0 согласованности совершенно нет, то есть связь между оценками различных экспертов отсутствует. Дли определения согласованности необходимо, чтобы найденное значение W было больше заданного. В качестве заданного можно принять значение равное 0,5. Значимость (существенность) коэффициента конкордации оценивается с помощью критерия %2 («хи квадрат»). При условии, что при выбранном уровне значимости фактическое значение данного критерия выше критического, коэффициент конкордации может быть принят в качестве оценки |
практический опыт и широту кругозора. Практикуется также самооценка экспертов, когда они оценивают степень своей осведомленности (или остальных экспертов) по определенной шкале. Но, так как экспертные оценки носят субъективный характер, оценка компетентности экспертов также является субъективной. Поэтому на практике проще определять окончательные оценки без формализованного учета компетентности экспертов. Только на этапе отбора экспертов следует уделить большее внимание неформальной оценке уровня их компетенции, а затем, при подведении результатов экспертизы, считать их всех равнокомпетентными. После того, как группа экспертов сформирована, приступают к проведению экспертного опроса. Проведение экспертного опроса включает ряд правил и условий, в число которых входят: независимость формирования экспертами собственного мнения об оцениваемых событиях; удобство работы с предлагаемыми анкетами (вопросы должны формулироваться в общепринятых терминах и должны исключать всякую смысловую неоднозначность); логическое соответствие вопросов структуре объекта исследования; приемлемые затраты времени на ответы по вопросам анкеты, удобное время получения вопросов и выдачи ответов; сохранение анонимности ответов для членов экспертной группы; предоставление экспертам требуемой информации. По завершению проведения экспертного опроса определяется согласованность мнений экспертов в соответствии с математическими процедурами [49, 85, 86, 99, 135, 136, 167]. Установление согласованности мнений экспертов основывается на ранжировании полученных оценок. При использовании рангов важности (ранжировании) невозможно установить, насколько один результат лучше другого, можно определить только ряд предпочтения рассматриваемых результатов. В качестве меры согласованности мнений экспертов принимается коэффициент конкордации Кендалла (XV), величина которого изменяется в пределах от 0 до 1. При = 0 согласованности совершенно нет, то есть связь 180 между оценками различных экспертов отсутствует. Дли определения согласованности необходимо, чтобы найденное значение XV было больше заданного. В качестве заданного можно принять значение равное 0,5. Значимость (существенность) коэффициента конкордации оценивается с помощью критерия %2 («хи квадрат»). При условии, что при выбранном уровне значимости фактическое значение данного критерия выше критического, коэффициент конкордации может быть принят в качестве оценки согласованности мнений экспертов. Если фактическое значение данного критерия меньше табличного, то вывод о существенности коэффициента конкордации сделать нельзя. При этом для уточнения последующих выводов необходимо провести дополнительный опрос с привлечением большего количества экспертов. Для упрощения вычислений коэффициент конкордации целесообразно рассчитывать по группам однородных событий (вопросов), характеризующих какой-либо уровень состояния предприятия. Это позволит исключить проведение дополнительных вопросов, если будут иметь место расхождения мнений не по всем оцениваемым событиям, а только по части из них. Следует отметить, что расчет коэффициента конкордации и критерия %2 можно производить в программном комплексе «8*айзйса», что во многом облегчает применение метода экспертных оценок в прогнозировании состояния предприятия. При достижении допустимого уровня согласованности и его существенности производится обобщение индивидуальных экспертных суждений с целью получения итогового результата оценки по соответствующему объекту исследования (прогнозирования). Определение оценок уровня текущего состояния предприятия и его составляющих на основе экспертных данных осуществляется в несколько этапов. Последовательность этапов аналогична той, что применяется при объединении частных показателей. 181 |