Методические положения комплексной оценки качества проектных разработок

1. Методические положения комплексной оценки качества проектных разработок Анализ методов комплексной оценки качества проектов Обобщенный показатель качества и способы его построения Экспертный метод оценки качества

2. 1) Анализ методов комплексной оценки качества проектов • - рассмотрение ограниченного числа частных показателей качества, преимущественно экономических, не позволяющих проводить всестороннюю оценку технического совершенства проектов; • - явно выраженный детерминистический характер расчета технических и экономических показателей; • - отсутствие методик для проведения всесторонней технико-экономической оценки; • - выбор предпочтительного решения на эвристической основе.

3. В качестве базовых образцов на стадии разработки следует принимать: • - изделия, отвечающие реально достижимым перспективным тенденциям; • - планируемые к освоению изделия, показатели, качества которых заложены в техническом задании, технических или рабочих проектах.

4. Наиболее часто применяемый в проектнойпрактике подход комплексной оценки эффективности проектных решений сводится к следующему: • - уровень качества предлагаемого технического решения выше или равен уровню качества базового (сравниваемого) варианта, если его характеристики выше или аналогичны показателям базового; • - уровень качества предлагаемого технического решения ниже базового варианта, если его характеристики ниже показателей базового(сравниваемого) изделия.

5. 2) Обобщенный показатель качества и способы его построения Обобщенный показатель качестватехнических решений можно представить функцией m переменных в m + 1 мерном пространстве: Где ki – единичный i-ый критерий качества (один из параметров)

6. Наибольшее распространение при проведении исследований и проектировании получили следующие методы формирования обобщенного показателя качества: • построение обобщенного показателя качества на основе физических зависимостей частных показателей качества; • интегральный показатель качества; • мультипликативная и аддитивная формы свертки частных показателей качества; • - получение обобщенного показателя качества путем экспертного опроса.

7. При этом наиболее строгим и точным выражением качества принимаемых технических решений является получение обобщенного показателя через физические зависимости выходных характеристик внутри рассматриваемой системы и сложного технического комплекса, включающего данную систему. Данный подход является наиболее сложным и не всегда возможен!

8. В ряде случаев результирующую целевую функцию строят на основе аддитивных или мультипликативных преобразований над выбранной системой выходных характеристик. При использовании аддитивных преобразований: где kv*=kv / kvп – единичный критерий качества (показывает во сколько раз улучшился данный показатель по отношению к эталонному значению); kvп- некоторое опорное (эталонное) значение показателя, выбираемое за единицу измерения; dv– весовой коэффициент, характеризующий важность ν-го показателя.

9. При использовании мультипликативных преобразований: При этом сумма коэффициентов весомости всегда равна 1 Для определения коэффициентов весомости используются различные методы, такие как: • - метод системы линейных уравнений; • метод системы показательных уравнений; • - метод статистической обработки проектов; • - метод частных коэффициентов корреляции; • - метод предельных и номинальных значений; • - экспертный опрос и др.

10. метод системы линейных уравнений

11. метод системы показательных уравнений

12. 3) Экспертный метод оценки качества Следует применять, когда определение единичного или обобщенного показателя невозможно или затруднено использование более объективных методов (измерительного, расчетного, установление физической зависимости между параметрами). При экспертном опросе широко применяется бальные оценки и ранжирование. Количество экспертов при этом определяется исходя из условия: Где n – число ранжируемых показателей.

13. Эксперт Показатель 1 2 3 4 5 6 7  рангов Отклонение от средн. значения суммы рангов Квадрат отклонения от среднего значения суммы рангов 1 1 1 2 2 2 1 1 10 -18 324 2 5 5 5 6 6 2 7 36 8 64 3 6 6 7 7 5 6 6 43 15 225 4 7 7 4 5 4 7 5 39 11 121 5 2 2 6 4 7 3 2 26 -2 4 6 3 3 1 1 1 5 4 18 -10 100 7 4 4 3 3 3 4 3 24 -4 16  196 S = 854

14. При этом согласованность мнений экспертов проверяется коэффициентом конкордации Кендалла: где S – сумма квадратов отклонений всех оценок рангов каждого объекта экспертизы от среднего арифметического суммы рангов; m – число экспертов; n – число ранжируемых показателей.

15. Коэффициент конкордации изменяется в диапазоне 0<W<1, причем 0 соответствует полной несогласованности, а 1 соответствует полной согласованности. Если значение W превышает 0,4…0,5 то качество оценки считается удовлетворительным, если превышает 0,7…0,8 – высоким. – высоким. В нашем случае

16. Коэффициенты весомости найдутся по формуле где wij – место, на которое i-ый показатель поставлен при ранжировании j-м экспертом. Для первого показателя:

17. Эксперты (j) Оценка показателей (i) l1 l2 l3 l4 l5 l6 l7 l8 1 10 9 7 3 8 4 4 53 8 2 10 9 10 5 3 6 4 3 50 3 10 8 8 7 3 7 4 5 53 4 10 10 8 5 5 7 5 5 55 5 10 8 9 8 5 8 4 4 56 6 10 10 7 5 3 6 4 3 48 7 10 8 8 7 5 8 6 5 57 8 10 9 9 6 4 7 4 4 53 9 10 10 10 7 4 8 6 5 60 1,68 1,50 1,45 1,05 0,65 1,20 0,76 0,70 di 0,187 0,167 0,161 0,117 0,072 0,133 0,084 0,078 0,999

18. Согласованность экспертов определяется по следующей формуле где Фi - коэффициент согласия по назначению величины i-го показателя; σi – среднеквадратическое отклонение оценок по i-му показателю, для нашего случая ; - среднеарифметическая оценка i-го показателя.

19. Определяется вес каждого i-го частного показателя качества в системе остальных показателей, данный j-ым экспертом Находится среднее значение весового коэффициента i-го показателя качества: