Нечетко-множественная оценка эффективности деятельности ООО «РЭП № 26»

                                           Рис. 1.2. Специальные квалиметрии.

Тестовая квалиметрия - характеризуется ситуацией оценки с высокой степенью ее формализуемости. Чаще ситуация такова, что применяемые методы могут рассматриваться как методы тестово-экспертной квалиметрии.

Экспертная квалиметрия. Для ситуаций, в которых применяются методы экспертной квалиметрии и методы теории экспертных оценок, характерно наличие так называемых субъективных показателей, по которым объект оценивается специалистом-экспертом. В экспертной квалиметрии используются методы, развиваемые в теории экспертных оценок, широко представленные в отечественной литературе. Применение экспертной квалиметрии при оценке качества характеризуется ситуацией, которая основана на привлечения плохо формализуемого опыта экспертов, или на измерении на основе органов чувств эксперта. Характеристики, по которым оценивается качество объекта, носят при этом субъективный характер, т.е. субъективное восприятие их интенсивностей содержит неопределенность.

Применение методов экспертной квалиметрии в процессе мониторинга  объектов различной природы часто  характеризуется ситуацией, при  которой сам алгоритм оценки может  относиться к методам другого  типа специальной квалиметрии, а  методы экспертной квалиметрии применяются  для определения коэффициентов  весомости показателей качества, шкалирования и формирования других элементов оценочной системы.

Индексная квалиметрия. Индексная квалиметрия базируется на аппарате теории индексов. Применение индексной квалиметрии характеризуется ситуацией, при которой оцениваются некоторые изменения, "темпы движения" показателей качества и объектов. Индексная квалиметрия в таком ее понимании расширяет традиционный подход к индексному измерению качества на базе среднеарифметических и среднегеометрических индексов. В роли индексов выступают здесь показатели качества в базовом периоде времени или в базовом объекте (базовой образовательной системе).

Таксономические методы - используются в виде "квалиметрической таксономии" в ситуации, когда процедуры оценивания разрабатываются в виде классификационных процедур. Сложность формирования квалиметрической таксономии связана с современным состоянием науки о классификациях и классификационной деятельности, находящейся в стадии своего становления. Класс объектов с данным качеством (квалитаксон) рассматривается как совокупность свойств тождественных по отношению к базе сравнения. Синонимами класса качеств в этой ситуации становятся категории, роды, сорта и т.д.

Вероятностно-статистическая квалиметрия. Этот вид квалиметрии применим к ситуациям, в которых оценка качества ориентирована на использование статистических оценок характеристик объектов оценки. Объекты оценки и измерительные процедуры при этом описываются вероятностно-статистическими моделями. Наиболее характерно применение методов вероятностно-статистической квалиметрии в тех случаях, когда оцениваются массовость, стабильность, используются выборочные методы контроля и т.д. Методы вероятностно-статистической квалиметрии являются основой для формирования экспертных квалиметрических систем.

Нечеткая квалиметрия. В ситуации, когда объект оценки слабоформализуем, его характеристики носят описательный характер, измерение интенсивностей свойств оценки сопровождается факторами нечеткости и неопределенности целесообразно использование методов нечеткой квалиметрии при оценке качества объектов мониторинга.

В оценке качества и состояний сложных  объектов и систем наибольшее распространение  получили модели и алгоритмы оценки качества, в основе которых лежат  методы экспертной и нечеткой квалиметрий, использование методов нечеткой квалиметрии, основанных на привлечении  методов теории экспертных оценок и  теории нечетких множеств, в настоящее  время носит эпизодический характер.

 

 

 

 

 

1.3 Сущность метода  экспертных оценок.

     В данной  курсовой работе для оценивания  эффективности организационной  структуры предприятия мы используем  метод экспертных оценок.  Ниже  мы рассмотрим сущность и основные  положения этого метода.

     Сущность метода  экспертных оценок заключается  в проведении экспертами интуитивно-логического  анализа проблемы с количественной  оценкой суждений и формальной  обработкой результатов. Получаемое  в результате обработки обобщенное  мнение экспертов принимается  как решение проблемы. Комплексное  использование интуиции (неосознанного  мышления), логического мышления  и количественных оценок с  их формальной обработкой позволяет  получить эффективное решение  проблемы.  
     При выполнении своей роли в процессе управления эксперты производят две основные функции: формируют объекты (альтернативные ситуации, цели, решения и т. п.) и производят измерение их характеристик (вероятности свершения событий, коэффициенты значимости целей, предпочтения решений и т. п.). Формирование объектов осуществляется экспертами на основе логического мышления и интуиции. При этом большую роль играют знания и опыт эксперта. Измерение характеристик объектов требует от экспертов знания теории измерений.

     Характерными  особенностями метода экспертных  оценок как научного инструмента  решения сложных не формализуемых  проблем являются, во-первых, научно  обоснованная организация проведения  всех этапов экспертизы, обеспечивающая  наибольшую эффективность работы  на каждом из этапов, и, во-вторых, применение количественных методов  как при организации экспертизы, так и при оценке суждений  экспертов и формальной групповой  обработке результатов. Эти две  особенности отличают метод экспертных оценок от обычной давно известной экспертизы, широко применяемой в различных сферах человеческой деятельности.

      В настоящее  время в нашей стране и за  рубежом метод экспертных оценок  широко применяется для решения  важных проблем различного характера.  В различных отраслях, объединениях  и на предприятиях действуют  постоянные или временные экспертные  комиссии, формирующие решения по  различным сложным не формализуемым  проблемам.

       Область  применения метода экспертных  оценок весьма широка. Перечислим  типовые задачи, решаемые методом  экспертных оценок:  
1) составление перечня возможных событий в различных областях за определенный промежуток времени;

2) определение наиболее  вероятных интервалов времени  свершения совокупности событий; 

3) определение целей и  задач управления с упорядочением  их по степени важности;  
4) определение альтернативных (вариантов решения задачи с оценкой их предпочтения;  
5) альтернативное распределение ресурсов для решения задач с оценкой их предпочтительности;  
6) альтернативные варианты принятия решений в определенной ситуации с оценкой их предпочтительности.

      Для решения  перечисленных типовых задач  в настоящее время применяются  различные разновидности метода  экспертных оценок. К основным  видам относятся: анкетирование  и интервьюирование; мозговой штурм;  дискуссия; совещание; оперативная  игра; сценарий.  
      Каждый из этих видов экспертного оценивания обладает своими преимуществами и недостатками, определяющими рациональную область применения. Во многих случаях наибольший эффект дает комплексное применение нескольких видов экспертизы.

      Анкетирование  и сценарий предполагают индивидуальную  работу эксперта. Интервьюирование  может осуществляться как индивидуально,  так и с группой экспертов.  Остальные виды экспертизы предполагают  коллективное участие экспертов,  в работе. Независимо от индивидуального  или группового участия экспертов  в работе целесообразно получать  информацию от множества экспертов.  Это позволяет получить на  основе обработки данных более  достоверные результаты, а также  новую информацию о зависимости  явлений, событий, фактов, суждений экспертов, не содержащуюся в явном виде в высказываниях экспертов.

      При использовании метода экспертных  оценок возникают свои проблемы. Основными из них являются: подбор  экспертов, проведение опроса  экспертов, обработка результатов  опроса, организация процедур экспертизы. 
      Для реализации процедуры экспертного оценивания необходимо сформировать группу экспертов. Общим требованием при формировании группы экспертов является эффективное решение проблемы экспертизы. Эффективность решения проблемы определяется характеристиками достоверности экспертизы и затрат на нее.

       Достоверность экспертного оценивания  может быть определена только  на основе практического решения  проблемы и анализа ее результатов.  Использование экспертов как  раз и обусловлено тем, что  отсутствуют какие-либо другие  способы получения информации. Поэтому  оценка достоверности экспертизы  может осуществляться, как правило,  только по послеопытным данным. Если экспертиза проводится систематически  с примерно одним и тем же  составам экспертов, то появляется  возможность накопления статистических  данных по достоверности работы  группы экспертов и получения  устойчивой числовой оценки достоверности.  Эту оценку можно использовать в качестве априорных данных о достоверности группы экспертов для последующих экспертиз.

       Достоверность группового экспертного  оценивания зависит от общего  числа экспертов в группе, долевого  состава различных специалистов  в группе, от характеристик экспертов. 

      Определение характера зависимости  достоверности от перечисленных  факторов является еще одной  проблемой процедуры подбора  экспертов.  
Сложной проблемой процедуры подбора является формирование системы характеристик эксперта, существенно влияющих на ход и результаты экспертизы. Эти характеристики должны описывать специфические свойства специалиста и возможные отношения между людьми, влияющие на экспертизу. Важным требованием к характеристикам эксперта является измеримость этих характеристик.

        Еще одной проблемой является  организация процедуры подбора  экспертов, т.е. определение четкой  последовательности работ, выполняемых  в процессе подбора экспертов  и необходимых ресурсов для  их реализации.  
Максимальное число экспертов в группе проверяется на ограничение по финансовым ресурсам. Определив зависимость между достоверностью, количеством экспертов и расходами на оплату, группа управления представляет руководству эту информацию и формулирует возможные альтернативы решений. Такими альтернативами могут быть либо снижение достоверности результатов экспертного оценивания до уровня, обеспечивающего выполнение ограничения по расходам на оплату экспертов, либо сохранение исходного требования на достоверность экспертизы и увеличение расходов на оплату экспертов.

       Следующим этапом работы по  подбору экспертов является составление  предварительного списка экспертов.  При составлении этого списка  проводится анализ качеств экспертов.  Кроме учета качеств экспертов,  определяются их местонахождение  и возможности участия выбранных  специалистов в экспертизе. При оценке качеств учитывается мнение людей, хорошо знающих кандидатов в эксперты.

       После составления списка экспертов  им направляются письма с приглашением  участвовать в экспертизе. В письмах  объясняется цель проведения  экспертизы, ее сроки, порядок  проведения, объем работы и условия  вознаграждения. К письмам прилагаются  анкеты данных эксперта и самооценки  компетентности. Получив ответы  экспертов, группа управления  составляет окончательный список  группы экспертов. 

      После составления и утверждения  списка экспертам посылается  сообщение о включении их в  состав экспертной группы. Если  экспертное оценивание производится  методом анкетирования, то одновременно  с уведомлением о включении  в экспертную группу всем экспертам  высылается анкета с необходимыми  инструкциями для их заполнения. Сообщением экспертам о включении  их в экспертизу заканчивается  работа по подбору экспертов. 
      Опрос - главный этап совместной работы группы управления и экспертов. Основным содержанием опроса является:

- постановка задачи и предъявление  вопросов экспертам; 

- информационное обеспечение работы  экспертов; 

- выработка экспертами суждений, оценок, предложений; 

- сбор результатов работы экспертов. 

Можно назвать три типа задач, которые  решаются в процессе опроса:  
- оценка качественная или количественная заданных объектов;

- построение новых объектов;

- построение и оценка новых  объектов.

      При коллективной экспертизе  используются следующие основные  виды опроса: дискуссия, анкетирование  и интервьюирование, метод коллективной  генерации идей или мозговой  штурм. 

     Анкетирование может проводиться  с обратной связью или без  нее. При анкетировании с обратной  связью опрос экспертов производится  в несколько этапов с доведением  до сведения экспертов некоторых  результатов опроса на предыдущем  этапе, включая оценки отдельных  экспертов и их аргументацию.  
      Главным в организации опроса является обеспечение максимума информации и максимума творческой активности, самостоятельности эксперта. Необходимо стремиться довести до каждого эксперта по возможности всю информацию, относящуюся к анализируемому явлению, которой располагают как эксперты, так и организаторы опроса, не лишая в то же время эксперта творческой самостоятельности и активности.  
       Однако возможности эксперта по переработке информации ограниченны. В результате эксперт может принять решение, не используя всей информации, имеющейся в его распоряжении. Кроме того, новая информация воспринимается человеком с определенным внутренним сопротивлением и не сразу влияет на уже сложившиеся субъективные оценки. Отношение к новой информации благожелательнее, а восприятие и использование ее полнее, если она представляется в доходчивой, яркой и компактной форме.