Cтраница 3
При определении степени подготовленности к автоматизации W и возможностей предприятия по повышению степени подготовленности Bt необходимо определить степень согласованности мнений экспертов по указанным показателям. Показатели № и В позволяют оценить анализируемую СП как объект автоматизации. [31]
Наиболее часто для этих целей используют коэффициент конкордации ( согласия), величина которого позволяет судить о степени согласованности мнений экспертов и, как следствие, о достоверности их оценок. [32]
Определяя дисперсию суммарной матрицы и сравнивая ее с максимально возможной дисперсией матрицы с таким же числом элементов, можно определить согласованность мнений экспертов. [33]
Качество экспертной оценки, ее надежность и обоснованность в решающей степени зависят от выбранной методики сбора и обработки индивидуальных экспертных значений, которая включает в себя: 1) выбор состава экспертов и оценку их компетентности; 2) составление анкет для опроса экспертов; 3) получение экспертных заключений; 4) оценку согласованности мнений экспертов; 5) оценку достоверности результатов и 6) программу для обработки экспертных заключений. [34]
Экспертная оценка трудоемкости создания САПР выполняется в несколько этапов, а именно: 1) формирование группы экспертов, ответственной за сбор и обобщение экспертных заключений; 2) разработка анкеты, предусматривающей такую формулировку основных вопросов, при которой эксперт не мог бы трактовать их двояким образом и мог дать количественную оценку; 3) проведение опроса; 4) анализ ответов, определение средней оценки по группе показателя согласованности мнений экспертов; 5) обобщение экспертных заключений и получение необходимых данных. Процедура сбора экспертных оценок выполняется по общепринятому алгоритму. Причем поскольку многие работы в процессе создания САПР выполняются с применением ЭВМ, обработка результатов экспертного анализа также может быть выполнена на ЭВМ по стандартным программам. [35]
При W 0 согласованности нет, т.е. связь между оценками различных экспертов отсутствует. При W 1 согласованность мнений экспертов полная. [36]
Общая коллективная экспертная оценка Е является основным результатом при определении величины, оцениваемой по матрицам дерева целей, построенным для различных рангов технических систем. Коэффициент вариации V, измеряемый отношением о2 / Е, показывает согласованность мнений экспертов в оценке величины показателей. В случае, например, равенства коэффициента вариации 0 1 ( или 10 %) мнения экспертов считаются достаточно согласованными, так как здесь их колебания равны 10 % величины средней оценки. [37]
Индивидуальный вариант может реализовываться по одношаговой и двухэтапной схемам. В любом случае непосредственному процессу опроса экспертов на предмет получения среднеарифметической балльной оценки предшествует проверка согласованности мнений отобранных экспертов. Для этого экспертам предлагают ранжировать единичные показатели уровня качества по степени из значимости. Значимость выражается порядковым предпочтением. [38]
Опрос производится в форме анкет для выяснения относительной важности и сроков свершения ожидаемых событий в прогнозируемой области. Групповое решение принимается не по мнению большинства, а на основе статистической обработки индивидуальных оценок с учетом степени согласованности мнений экспертов, которая характеризуется относительной величиной размаха индивидуальных оценок. [39]
Чтобы обеспечить эти условия, эксперт должен быть не заинтересован в результате экспертизы, иметь психологическую независимость ji высокую квалификацию. Подбор эксперта оказывается ответственной проблемой, При этом учитывают связь профиля деятельности эксперта с анализируемой проблемой, совпадение рекомендаций и фактических результатов в ранее выполняемых экспертом работах, степень согласованности мнения эксперта с другими экспертами, опыт экспертной деятельности, квалификационный уровень эксперта, степень доступа эксперта к необходимой дополнительной информации. [40]
Параметры оцениваются в долях единицы. Коэффициент значимости по каждому параметру рассчитывается как среднеарифметическое значение из оценок, данных экспертами. Для оценки согласованности мнений экспертов может использоваться коэффициент вариации ( V 33) или какой-либо другой показатель. [41]
Как следует из табл. 5.5, согласованность мнений экспертов колеблется в больших пределах. Удовлетворительная согласованность мнений имеет место только по двум первым факторам. Окончательные выводы о согласованности мнений экспертов необходимо сделать по коэффициенту конкордации. [42]
Обобщенное мнение экспертов также получают с помощью методов математической статистики. Но сказать что-либо о согласованности мнений экспертов не представляется возможным. [43]
В последние годы разработаны новые методы учета мнении экспертов, свободные от указанных недостатков. К таким относятся методы Дельфи [43], ранговой корреляции [44] и некоторые другие. Достоинствами этих методов является то, что применение их позволяет решать задачу оценки согласованности мнений экспертов. При этом в качестве экспертов могут выступать как отдельные специалисты, так и целые организации. [44]
В отличие от метода комиссий и мозговой атаки процедура метода Дельфи предусматривает полную изоляцию экспертов и анонимность их мнений. Опрос производится в форме анкет для выяснения относительной важности и сроков свершения ожидаемых событий в прогнозируемой области. Групповое решение принимается не по мнению большинства, а на основе статистической обработки индивидуальных оценок с учетом степени согласованности мнений экспертов, которая характеризуется относительной величиной размаха индивидуальных оценок. [45]