Системное исследование управления организацией

При классификации по признаку оценки предпочтений при принятии решений по управлению в настоящее время наиболее распространены метод рангов, метод непосредственного оценивания, метод сопоставлений. Последний включает две разновидности — парного сравнения и последовательного сопоставления.

В принципе эти методы имеют много общего, а отличие состоит в том, что оценивание (измерение) изучаемых объектов системного управления осуществляется различными способами.

Общность заключается в последовательности проведения процедур при использовании каждого из методов. К ним следует отнести: организацию экспертного оценивания; проведение сбора мнений экспертов; обработку результатов мнений экспертов.

Практика показывает, что и повышение объективности результатов использования экспертных методов существенно зависит от соблюдения правил организации, подготовки и проведения экспертных работ. В первую очередь это организация экспертного оценивания, назначение ответственного за организацию и проведение работ по экспертной оценке, а также формирование экспертных комиссий.

Для общего руководства экспертными работами следует назначать председателя экспертной комиссии, В составе комиссии организуют две группы: рабочую и экспертную (рис. 3.1).

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Рис. 3.1. Типовой состав экспертной комиссии

 

Рабочую группу возглавляет ее руководитель (организатор). В его подчинение входят технические работники, осуществляющие технические работы по подготовке материалов к работе экспертов, обработку результатов работы экспертов и т.п.

В экспертную группу входят эксперты — специалисты по решаемым проблемам. Формирование этой группы осуществляет руководитель (организатор) рабочей группы.

Формирование экспертной группы включает в себя ряд последовательных мероприятий:

• постановку проблемы и определение области деятельности группы;

• составление предварительного списка экспертов — специалистов в рассматриваемой области деятельности;

• анализ качественного состава предварительного списка экспертов и уточнение списка;

• получение согласия эксперта для участия в работе;

• составление окончательного списка экспертной группы.

Количество экспертов в экспертной группе зависит от множества факторов и условий, в частности от важности решаемой проблемы, располагаемых возможностей и т.п. В большинстве случаев определяется минимально необходимое количество экспертов.

 

Подбор конкретных экспертов проводится на основе анализа качества каждого из них. Для этой цели используются разнообразные способы:

• оценка кандидатов в эксперты на основе статистического анализа результатов прошлой деятельности в качестве экспертов по проблемам оргпроектирования;

• коллективная оценка кандидата в эксперты как специалиста в данной области:

• самооценка кандидата в эксперты;

• аналитическое определение компетентности кандидатов в эксперты.

Очень часто применяют одновременно несколько способов. Например, способы самооценки и коллективной оценки качеств предлагаемого эксперта. Такой подход позволяет достаточно обоснованно подобрать экспертов с необходимыми качествами. Однако следует признать, что способ оценок прошлой деятельности представляется более объективным, чем способы самооценки и коллективной оценки.

Независимо от избранного способа оценки качеств кандидатов эксперты должны удовлетворять во всех случаях таким требованиям, как:

• профессиональная компетентность в области проектирования организационных систем;

• креативность (умение решать творческие задачи);

• научная интуиция;

• заинтересованность в объективных результатах экспертной работы;

• деловитость (собранность, умение переключаться с одного вида деятельности на другой, коммуникативность, независимость суждений, мотивированность действий);

• объективность;

• нонконформизм.

Проведение сбора мнений экспертов предполагает предварительное решение рада вопросов. Это определение:

• места и времени сбора мнений;

• формы и методики сбора мнений; ' количества туров сбора мнений;

• состава и содержательной части документации;

• порядка занесения результатов мнений экспертов в документы.

Очень важна форма сбора мнений экспертов. Это могут быть индивидуальные, коллективные и смешанные, то есть различаться прежде всего по фактору участия экспертов в работе (индивидуальное или коллективное). Каждая из этих форм имеет ряд разновидностей:

• анкетирование;

• интервьюирование;

• дискуссия;

• мозговой штурм;

• совещание;

• деловая игра.

Все они обладают своими достоинствами и недостатками. Смешанная форма применяется в случаях некоторой неясности проблемы, разногласиях индивидуальных мнений или разногласиях экспертов при коллективном обсуждении.

 

Наиболее часто в проектировании оргсистем практикуется анкетирование, которое позволяет с меньшими трудозатратами (хотя и с большими затратами времени) собрать мнение экспертов.

Обычно процесс разработки анкеты включает:

• определение формы и содержания обращения к эксперту;

• выбор типа вопросов;

• формулировку вопросов;

• изложение необходимой для экспертов информации;

• разработку формы анкеты.

Представляет интерес выбор вопросов. В последние годы наиболее часто употребляются так называемые веерный, закрытый и открытый типы ( веерный предполагает ответ из представленного заранее в анкете ряда ответов; закрытый — «да», «нет», «не знаю»; открытый — вопрос, ответ на который может быть дан в произвольной форме ).

При анкетировании экспертов очень важно правильно, просто, однозначно, кратко и в то же время с необходимой полнотой сформулировать вопросы в анкетах, а в тексте пояснительной записки указать, что конкретно требуется от эксперта.

Для ответов на вопросы, то есть для принятия решения каждым экспертом, проводятся объективные и (или) субъективные измерения рассматриваемого объекта в явном или неявном виде. При субъективном измерении эксперты, как правило, применяют один из указанных ранее наиболее употребляемых методов (рангов, непосредственного оценивания, сопоставлений).

По методу рангов эксперт осуществляет ранжирование (упорядочение) исследуемых объектов организационной системы в зависимости от их относительной значимости (предпочтительности). Наиболее предпочтительному объекту обычно присваивается ранг 1, а наименее предпочтительному — последний ранг, равный по абсолютной величине числу упорядочиваемых объектов. Более точным такое упорядочение становится при меньшем количестве объектов исследования и наоборот.

Таким образом, этот метод позволяет определить место исследуемого объекта среди других объектов СУ. Достоинством метода рангов является его простота. Однако метод не позволяет с достаточной точностью ранжировать объекты, количество которых превышает 15- -20, а также ответить на вопрос, как далеко по значимости находятся исследуемые объекты друг от друга.

Несмотря на свою простоту, данный метод применяется в практике исследования СУ довольно редко.

Метод непосредственного оценивания представляет собой упорядочение исследуемых объектов  (например, при отборе параметров для составления параметрической модели) в зависимости от их важности путем приписывания баллов каждому из них. При этом наиболее важному объекту приписывается (дается оценка) наибольшее количество баллов по принятой шкале. Наиболее распространен диапазон шкалы оценок от 0 до 1,0, до 5,0, до 10.0, до 100. В простейшем случае оценка может быть 0 или 1. Иногда оценивание осуществляется в словесной форме. Например, «очень важный», «важный», «маловажный» и т.п., что тоже иногда для большего удобства обработки результатов опроса переводится в балльную шкалу (соответственно 3, 2, 1).

Указанный метод используется только при уверенности полной информированности экспертов об исследуемых свойствах объекта, чего часто не бывает.

Метод сопоставления осуществляется, как уже указывалось ранее, парным сравнением и последовательным сопоставлением.

При парном сравнении эксперт сопоставляет исследуемые объекты по их важности попарно, устанавливая в каждой паре наиболее важный.

Иногда эксперты приходят к выводу об эквивалентности каждого из объектов пары. Упорядочение в каждой паре, безусловно, не дает сразу упорядочения всех рассматриваемых объектов, поэтому необходима последующая обработка результатов сравнения. Все возможные пары объектов эксперт представляет в виде записи каждой из комбинаций (объект 1 — объект 2, объект 2 — объект 3 и т.д.) или в форме матрицы.

Наиболее удобно осуществлять парные сравнения и их обработку, используя в качестве инструмента матрицы.

При большом количестве исследуемых объектов на результаты парного сравнения могут влиять психологические факторы, то есть предпочтение порой получает тот объект, который в перечне пар записан первым или находится выше по расположению в матрице. Поэтому для исключения психологического влияния иногда проводят двойное парное сравнение, то есть парное сравнение при обратном расположении объектов и соответственно объектов в каждой паре.

Метод парных сравнений очень прост и позволяет исследовать большое количество объектов (по сравнению, например, с методом рангов) и с большей точностью.

Сущность метода последовательною сопоставления состоит в следующем. Эксперт располагает все исследуемые объекты в порядке их важности (как метод рангов). Предварительно каждому из объектов приписывается определенное количество баллов, например, по шкале от 0 до I (как метод оценивания). Причем самому важному объекту дается балл равный 1, а всем остальным в порядке уменьшения их значимости, то есть от 1 до 0. Далее эксперт решает, будет ли важность объекта, имеющего ранг 1. больше суммы балльных оценок всех остальных объектов. Если будет, то величина балльной оценки первого объекта увеличивается до соблюдения этого условия, а если нет, то эксперт уменьшает эту величину до такого числового значения, чтобы она стала меньше суммы оценок всех остальных объектов.

Величины оценок второго, третьего и последующих объектов по важности определяются последовательно, аналогично оценке первого, наиболее важного объекта.

Метод последовательного сопоставления для экспертов наиболее трудоемок, особенно когда количество исследуемых объектов более шести-семи.

Мнения экспертов подвергаются как количественной (численных данных), так и качественной (содержательной информации) обработке. При этом используются различные способы. При наличии численных данных для решения вопросов, имеющих достаточный информационный материал, в основном применяются методы усреднения экспертных суждений. Однако при недостаточности информации по решаемому вопросу (что нередко бывает при проектировании СУ) наряду с количественными методами обработки экспертных данных используются также и методы качественного анализа и синтеза.

При рассмотренных экспертных методах (рангов и др.) мнения экспертов часто совпадают не полностью. Поэтому необходимо количественно оценивать меру согласованности мнений экспертов и выявлять причины несовпадения суждений. Мера согласованности определяется на основе статистических данных всей группы экспертов.

Для ее оценки используются, как правило, коэффициенты конкордации — дисперсионный и энтропийный.

Дисперсионный коэффициент конкордации принимает значения от О до 1. При 0 нет согласованности между мнениями экспертов, при 1 — согласованность полная. Если дисперсионный коэффициент конкордации больше 0,5, согласованность обычно считается достаточной.

Энтропийный коэффициент конкордации (иначе его называют коэффициентом согласия) также изменяется от 0 до 1: при большей величине коэффициента — большая мера согласованности.

Когда мнения экспертов различаются незначительно, указанные выше коэффициенты дают примерно одинаковую меру согласованности. Однако при существенных различиях величины коэффициентов будут существенно отличаться. Таким образом, совместный анализ коэффициентов позволяет объективно определить меру согласованности мнений экспертов.

Применение рассмотренных экспертных методов доказало свою эффективность при исследованиях и проектировании СУ, причем наибольший эффект достигается при одновременном использовании нескольких методов.

К разновидности экспертного метода можно отнести социологический, который основан на опросе, сборе и анализе мнений респондентов (например, фактических или потенциальных потребителей). Такой опрос и сбор мнений производится обычно в письменной форме — распространением анкет либо устно (на конференциях, аукционах, выставках, в учебных заведениях и т.п.). При использовании этого метода также следует применять научно-обоснованные способы опроса, математические принципы сбора и обработки информации.

Обработка экспертных и социологических данных и расчеты мер согласованности требуют трудоемких вычислений. Поэтому при сборе и обработке результатов экспертной и социологической информации необходимо широко использовать компьютерную технику. Возможности для этого есть, так как автоматизация обработки результатов подобного рода данных стала предметом создания ряда продуктов программного обеспечения.