Госстандарт СССР
21.05.1981
01.01.1982
Действует c 01.01.1982
Руководящий документ РД 50-250-81
Методические указания. Системы автоматизированного проектирования. Оценка показателей качества создания и функционирования
РД 50-250-81
РУКОВОДЯЩИЙ НОРМАТИВНЫЙ ДОКУМЕНТ
МЕТОДИЧЕСКИЕ УКАЗАНИЯ
Системы автоматизированного проектирования.
Оценка показателей качества создания и функционирования
Дата введения 1982-01-01
РАЗРАБОТАНЫ Академией наук БССР
Государственным комитетом СССР по стандартам
Министерством высшего и среднего специального образования РСФСР
Государственным комитетом СССР по науке и технике
Академией наук УССР
ИСПОЛНИТЕЛИ
О.И.Семенков; Г.Г.Маньшин (руководитель темы); В.А.Бурделев (исполнитель); И.Э.Том; Л.А.Шиндикова; Д.В.Кривомазов; Е.С.Кранков; А.И.Половинкин; Н.К.Бобков; Ю.А.Савостицкий; В.В.Шкурба; В.Е.Кравченко
ВНЕСЕНЫ Академией наук БССР
Академик АН БССР Л.И.Киселевский
УТВЕРЖДЕНЫ И ВВЕДЕНЫ В ДЕЙСТВИЕ Постановлением Государственного комитета СССР по стандартам от 21 мая 1981 г. N 2532
ВВЕДЕНЫ ВПЕРВЫЕ
Настоящие методические указания устанавливают номенклатуру и правила определения показателей качества создания и показателей качества функционирования систем автоматизированного проектирования (САПР), находящихся на различных стадиях создания в отраслях машино- и приборостроения, а также введенных в действие САПР.
Настоящие методические указания являются основой для создания отраслевых методик оценки уровня качества САПР.
1. ОБЩИЕ ПОЛОЖЕНИЯ
1.1. Оценку показателей качества создания и функционирования САПР производят на стадиях создания САПР с целью выбора рационального варианта. Оценку показателей качества функционирования производят с целью сравнения введенных в действие САПР.
1.2. Оценку показателей качества САПР с целью выбора рационального варианта осуществляет организация - разработчик САПР. Сравнение введенных в действие САПР осуществляет экспертная комиссия министерства, ведомства, предприятия, объединения или межведомственная экспертная комиссия.
1.3. Качество создания и функционирования САПР можно оценить дифференциальным методом по совокупности единичных показателей. При определении значений единичных показателей качества необходимо применять один из методов, установленных в ГОСТ 15467-79, или их сочетание.
1.4. Для эффективного решения задач выбора рационального варианта, создаваемой САПР, или сравнения введенных в действие САПР качество САПР необходимо оценивать по обобщенным показателям с использованием комплексного метода оценки.
1.5. При выборе рационального варианта создаваемой САПР обобщенным показателем качества является показатель качества создания и функционирования САПР. Его определяют два комплексных показателя:
1.6. При сравнении введенных в действие САПР обобщенным показателем качества является показатель качества функционирования САПР (определяется на основании данных опытной или промышленной эксплуатации).
1.7. Комплексные показатели определяются совокупностью единичных (групповых, комплексных) показателей качества САПР в соответствии со структурой показателя качества создания и функционирования (обязательное приложение 1). При необходимости допускается дальнейшая детализация структуры и добавление в нее новых показателей качества.
1.8. Значения комплексных показателей качества определяют с помощью модифицированного метода средневзвешенных величин. Состав и последовательность основных операций для определения значений комплексных показателей качества представлены в разд.5.
1.9. При оценке показателей качества САПР в отраслевых организациях можно использовать не указанные в настоящих методических указаниях операции, методы и их модификации, которые соответствуют конкретным условиям оценки и не противоречат основным положениям методических указаний.
1.10. Термины, применяемые в настоящих методических указаниях - по ГОСТ 15467-79.
2. ОЦЕНКА ПОКАЗАТЕЛЯ КАЧЕСТВА СОЗДАНИЯ САПР
2.2. Длительность создания САПР определяют как суммарную длительность стадии создания САПР с учетом возможности их параллельного выполнения.
2.3. Полные затраты на создание САПР включают в себя предпроизводственные затраты на ее создание и капитальные затраты в основные фонды предприятия.
2.5. Показатель качества принятия и реализации организационных решений по стадиям создания САПР определяют показатели качества, соответствующие стадиям создания по ГОСТ 23501.1-79:
2.6. Показатель качества комплекса средств автоматизации проектирования - количественная характеристика совокупности различных видов обеспечений, необходимых для выполнения автоматизированного проектирования - определяют показатели качества соответствующих видов обеспечений автоматизированного проектирования:
2.7. Основные принципы использования лингвистических экспертных оценок приведены в справочном приложении 2.
3. ОЦЕНКА ПОКАЗАТЕЛЯ КАЧЕСТВА ФУНКЦИОНИРОВАНИЯ САПР
3.1. Показатель качества функционирования САПР - количественная характеристика свойств, составляющих качество функционирования САПР - определяют следующие показатели:
4. ОЦЕНКА КОМПЛЕКСНЫХ ПОКАЗАТЕЛЕЙ КАЧЕСТВА САПР
4.1. К комплексным показателям относят:
Комплексные показатели определяют расчетным методом, который основан на последовательной композиции единичных показателей (с учетом их коэффициентов весомости) в комплексные в соответствии с иерархической структурой показателя качества создания и функционирования САПР, представленной в обязательном приложении 1.
Способ композиции единичных показателей качества приведен в справочном приложении 2.
4.3. Исходной информацией для расчета коэффициентов весомости является матрица экспертных парных сравнений показателей качества. Метод определения коэффициентов весомости приведен в справочном приложении 3.
4.4. Значение комплексного показателя представляет собой число из отрезка [0,1]. Единица соответствует наилучшему (идеальному) значению комплексного показателя качества.
5. ПОСЛЕДОВАТЕЛЬНОСТЬ РАСЧЕТА ОБОБЩЕННОГО ПОКАЗАТЕЛЯ КАЧЕСТВА САПР
5.1. Для расчета значения обобщенного показателя качества САПР установлены следующий состав и последовательность основных операций:
определение значений единичных показателей качества;
аппроксимация значений единичных показателей качества, определенных в пп.2.2, 2.3, 3.3, 3.4.;
расчет значения обобщенного показателя качества создания и функционирования САПР.
5.2. Исходной информацией для расчета обобщенного показателя качества создания и функционирования САПР являются:
структура показателя качества создания и функционирования САПР;
матрицы парных сравнений показателей качества, составляющих соответствующие комплексные показатели;
количественные и лингвистические оценки единичных показателей качества.
5.3. Пример оценки показателей качества создания САПР, качества функционирования САПР и качества создания и функционирования САПР приведен в справочном приложении 4.
ПРИЛОЖЕНИЕ 1
Обязательное
СТРУКТУРА ПОКАЗАТЕЛЯ КАЧЕСТВА СОЗДАНИЯ И ФУНКЦИОНИРОВАНИЯ САПР
ПРИЛОЖЕНИЕ 2
Справочное
ОСНОВНЫЕ ПРИНЦИПЫ ИСПОЛЬЗОВАНИЯ ЛИНГВИСТИЧЕСКИХ ЭКСПЕРТНЫХ ОЦЕНОК
2. Процедура оценки показателей качества предусматривает сопоставление значения оцениваемого показателя с базовым. Это приводит к необходимости введения лингвистических переменных двух типов для экспертной оценки единичных показателей качества создания и функционирования САПР.
где
В методических указаниях принимается следующая номенклатура модификаторов:
В качестве функций принадлежности нечетких множеств, соответствующих первичным термам, целесообразно рекомендовать такие, которые представлены на чертеже.
Их аналитическое представление имеет вид:
Предлагаемые выражения для функций принадлежности первичных термов могут быть уточнены по результатам экспериментального применения методических указаний.
5. Под значением единичного показателя качества понимают степень соответствия системы (подсистемы) базовому значению рассматриваемого показателя в виде
6. Эксперт оценивает показатель качества в следующей последовательности:
формирует базовое значение показателя качества приписыванием к рассматриваемому показателю подходящего, с точки зрения эксперта, лингвистического значения из терм-множества лингвистической переменной "Качество";
оценивает для рассматриваемой системы (подсистемы) ее соответствие базовому значению показателя качества с помощью подходящего лингвистического значения из терм-множества переменной "Величина".
7. Под модификацией понимают изменение формы графиков функций принадлежности, приведенных на чертеже. Один из способов такого изменения заключается в возведении значений функции принадлежности в степень, соответствующую конкретному модификатору. В табл.1 представлены рекомендуемые значения показателей степени для каждого из введенных модификаторов.
Таблица 1
|
|
|
|
Название модификатора | Обозначение | Показатель степени | Примечание |
Не | - | Модификатор "не" означает арифметическую операцию для значения функции принадлежности | |
Более или менее | 0,5 | - | |
Почти | 0,75 | - | |
Достаточно | 1,25 | - | |
Очень | 2,0 | - | |
Высоко | 3,0 | - |
Связки "и" и "или" в составных термах означают соответственно операции взятия min и max для значений функций принадлежности.
8. Комплексные показатели вычисляют последовательной композицией единичных показателей качества в комплексный по следующему правилу:
где выражение в левой части соответствует комплексному показателю.
Для интерпретации результата вычисления комплексного показателя в виде числа из отрезка [0,1] необходимо найти лингвистическое среднее результирующей функции принадлежности
9. В табл.2 даны определения терминов, введенных в настоящем приложении.
Таблица 2
|
|
Термин | Определение |
Нечеткое множество ( ) | Нечеткое множество , определенное на универсальном множестве - совокупность пар { , } и , где - функция принадлежности нечеткому множеству . Примечание. Запись нечеткого множества осуществляется в виде
; , где знак + обозначает объединение, а не арифметическое суммирование. |
Функции принадлежности ( ) | Характеристика нечеткого множества, которая ставит в соответствие каждому элементу число из отрезка [0,1], характеризующее степень принадлежности элемента множеству . |
Лингвистическая переменная | Набор ( , , , , ), в котором - название переменной, - терм-множество переменной , то есть множество названий лингвистических значений , каждое из которых - нечеткая переменная со значениями из универсального множества , - синтаксическое правило, порождающее названия значений переменной |
Нечеткая переменная | Набор ( , , ( , ) в котором - название переменной, - универсальное множество, - общее название элементов множества (базовая переменная). ( , ) - нечеткое подмножество множества . |
Модификаторы | Слова "не", "почти", "очень", "более или менее" и т.д., встречающиеся в названиях лингвистических значений . |
Первичный терм | Терм без модификаторов |
10. Поясним введенные термины на примере.
<не низкий>, <средний>,
<не очень высокий > и т.д. Функции принадлежности для первичных термов
<высокий>, <средний>,
<низкий> представлены на чертеже и выражениями (1). Семантические правила для термов с модификацией соответствуют операциям, представленным в табл.1.
ПРИЛОЖЕНИЕ 3
Справочное
ОПРЕДЕЛЕНИЕ КОЭФФИЦИЕНТОВ ВЕСОМОСТИ ПОКАЗАТЕЛЕЙ КАЧЕСТВА
1. Значения коэффициентов весомости вычисляют в результате обработки матрицы экспертных парных сравнений показателей качества, составляющих некоторый комплексный показатель.
|
|
Интенсивность предпочтения | Определение |
1 | Равны по важности |
3 | Слабая предпочтительность |
5 | Сильная предпочтительность |
7 | Доминирующая предпочтительность |
9 | Абсолютная предпочтительность |
2, 4, 6, 8 | Промежуточные значения |
Тогда:
Отсюда
что соответствует следующему вектору коэффициентов весомости
ПРИЛОЖЕНИЕ 4
Справочное
ПРИМЕР ОЦЕНКИ ПОКАЗАТЕЛЕЙ КАЧЕСТВА САПР
Исходные данные, необходимые в соответствии с п.5.5 настоящих методических указаний для расчета показателей качества создания, качества функционирования, качества создания и функционирования приведены в табл.1, 2 настоящего приложения и обязательном приложении 1.
Таблица 1
|
|
|
|
|
Название единичного показателя | Обозначение | Числовое значение показателя | Качественная (лингвистическая) оценка | Символьная запись |
Длительность создания САПР |
| <высокий> | ||
Полные затраты на создание САПР |
| <высоко> <высокий> | ||
Показатель качества принятия и реализации организационных решений по стадиям создания САПР: |
|
|
|
|
выполнение предпроектных исследований |
| <средний> | ||
выполнение технического задания |
| <средний> | ||
выполнение технического предложения |
| <достаточно> <высокий> | ||
выполнение эскизного проекта |
| <достаточно> <средний> | ||
выполнение технического проекта |
| <средний> | ||
выполнение рабочего проекта |
| <высокий> | ||
изготовление, отладка, испытание |
| <почти> <высокий> | ||
ввод в действие |
| <высокий> | ||
Показатель качества комплекса средств автоматизации проектирования (обеспечений САПР): |
|
|
|
|
организационного |
| <высокий> | ||
лингвистического |
| <высоко> <высокий> | ||
математического |
| <достаточно> <средний> | ||
программного |
| <очень> <высокий> | ||
информационного |
| <высоко> :=<достаточно> <высокий> | ||
технического |
| <почти> :=<достаточно> <высокий> | ||
методического |
| <высоко> :=<высокий> | ||
Показатель качества результата (результатов) проектирования |
| := <высокий> | ||
Коэффициент технического использования КТС САПР | 0,85 | <высоко> <высоко> :=<достаточно> <высокий> | ||
Годовой экономический эффект от внедрения САПР |
| :=<очень> <высокий> |
Таблица 2
|
|
|
Комплексный показатель и его обозначение | Обозначение единичных показателей | Значение козффициента весомости |
Показатель качества принятия и реализации организационных решений ( ) | 0,4457 | |
| 0,4356 | |
| 1,8978 | |
| 2,1281 | |
| 1,3707 | |
| 0,6907 | |
| 0,2781 | |
| 0,7523 | |
Показатель качества комплекса средств автоматизации проектирования ( ) | 1 | |
| 1 | |
| 1 | |
| 1 | |
| 1 | |
| 1 | |
| 1 | |
| 1 | |
Показатель организационно-технического уровня САПР ( ) | 1,3333 | |
| 0,6667 | |
Показатель качества создания САПР ( ) | 0,544 | |
| 0,705 | |
| 1,75 | |
Показатель качества функционирования САПР ( ) | 1 | |
| 1 | |
| 1 | |
Показатель качества создания и функционирования САПР ( ) | 1,3000 | |
| 0,4998 |
Значения функций принадлежности нечетких множеств, соответствующих первичным термам "высокий", "средний", "низкий", вычисленные в соответствии с формулой (1) приложения 2 с шагом дискретизации переменной и, равным 0,1, представлены в табл.3.
Таблица 3
|
|
|
|
|
|
|
|
|
|
|
|
Высокий | 0 | 0,02 | 0,08 | 0,18 | 0,38 | 0,5 | 0,68 | 0,82 | 0,92 | 0,98 | 1 |
Средний | 0 | 0,08 | 0,32 | 0,68 | 0,92 | 1,0 | 0,92 | 0,68 | 0,52 | 0,08 | 0 |
Низкий | 1 | 0,98 | 0,92 | 0,82 | 0,68 | 0,5 | 0,32 | 0,18 | 0,68 | 0,02 | 0 |
Результаты решения аналогичных уравнений для всех единичных показателей с учетом коэффициентов весомости приведены в табл.4.
Вычисленные по формуле (3) приложения 3 нормированные значения комплексных показателей качества приведены в табл.5.
Организациям, которые часто выполняют расчеты по оценке показателей качества создания и функционирования САПР, целесообразно пользоваться программным комплексом PCQV, разработанным в ИТК АН БССР и переданным в ГосФАП в 1981 г.
Таблица 4
|
|
|
|
|
|
|
|
|
|
|
|
0 | 0,00067 | 0,0089 | 0,0406 | 0,119 | 0,274 | 0,4866 | 0,6903 | 0,855 | 0,963 | 1 | |
0 | 0,000002 | 0,00021 | 0,0032 | 0,0224 | 0,099 | 0,276 | 0,516 | 0,758 | 0,935 | 1 | |
0 | 0,324 | 0,6017 | 0,842 | 0,963 | 1,0 | 0,963 | 0,842 | 0,6017 | 0,324 | 1 | |
0 | 0,332 | 0,608 | 0,845 | 0,964 | 1,0 | 0,964 | 0,845 | 0,608 | 0,332 | 0 | |
0 | 0,00009 | 0,0026 | 0,017 | 0,067 | 0,190 | 0,399 | 0,624 | 0,820 | 0,953 | 1 | |
0 | 0,0012 | 0,048 | 0,357 | 0,801 | 1,0 | 0,801 | 0,357 | 0,048 | 0,0012 | 0 | |
0 | 0,0736 | 0,209 | 0,589 | 0,892 | 1,0 | 0,892 | 0,589 | 0,209 | 0,0736 | 0 | |
0 | 0,067 | 0,175 | 0,306 | 0,455 | 0,019 | 0,756 | 0,872 | 0,944 | 0,986 | 1 | |
0 | 0,441 | 0,59 | 0,699 | 0,788 | 0,866 | 0,923 | 0,959 | 0,983 | 0,995 | 1 | |
0 | 0,0525 | 0,149 | 0,275 | 0,424 | 0,593 | 0,747 | 0,861 | 0,939 | 0,984 | 1 | |
0 | 0,02 | 0,08 | 0,18 | 0,32 | 0,5 | 0,68 | 0,82 | 0,92 | 0,98 | 1 | |
0 | 0,000008 | 0,0005 | 0,00058 | 0,0328 | 0,125 | 0,3144 | 0,551 | 0,779 | 0,941 | 1 | |
0 | 0,133 | 0,402 | 0,735 | 0,935 | 1,0 | 0,935 | 0,735 | 0,402 | 0,133 | 0 | |
0 | 0,0004 | 0,0064 | 0,0324 | 0,102 | 0,25 | 0,465 | 0,672 | 0,846 | 0,096 | 1 | |
0 | 0,196 | 0,349 | 0,489 | 0,623 | 0,749 | 0,852 | 0,421 | 0,966 | 0,992 | 1 | |
0 | 0,00015 | 0,0148 | 0,057 | 0,149 | 0,315 | 0,526 | 0,718 | 0,870 | 0,967 | 1 | |
0 | 0,2917 | 0,4312 | 0,5649 | 0,6843 | 0,7939 | 0,879 | 0,936 | 0,972 | 0,993 | 1 | |
0 | 0,02 | 0,08 | 0,18 | 0,32 | 0,5 | 0,68 | 0,82 | 0,92 | 0,98 | 1 | |
0 | 0,58 | 0,7 | 0,79 | 0,85 | 0,93 | 0,95 | 0,97 | 0,988 | 0,997 | 1 | |
0 | 0,0004 | 0,0064 | 0,0324 | 0,102 | 0,25 | 0,462 | 0,672 | 0,846 | 0,960 | 1 |
Таблица 5
|
|
|
|
|
|
|
|
|
|
|
|
0 | 0,000013 | 0,0012 | 0,049 | 0,092 | 0,377 | 1,0 | 0,861 | 0,059 | 0,00043 | 0 | |
0 | 0,0006 | 0,0093 | 0,0479 | 0,1524 | 0,372 | 0,6866 | 1,0 | 0,809 | 0,387 | 0 | |
0 | 0,0080 | 0,0134 | 0,1409 | 0,2167 | 0,5306 | 0,7858 | 1,0 | 0,163 | 0,0069 | 0 | |
0 | 0,000008 | 0,00051 | 0,0038 | 0,0326 | 0,1249 | 0,3139 | 0,5508 | 0,7781 | 0,940 | 0 | |
0 | 0,0020 | 0,0020 | 0,0788 | 0,2085 | 0,4383 | 0,7315 | 1,0 | 0,5623 | 0,1141 | 0 | |
0 | 0,000014 | 0,0091 | 0,0103 | 0,6579 | 0,2221 | 0,5582 | 0,9795 | 1,0 | 0,2032 | 0 |
Руководящие указания по тепловому расчету поверхностных конденсаторов мощных турбин тепловых и атомных электростанций
Компенсирующие устройства судовых магнитных компасов. Временная инструкция по настройке и уничтожению электромагнитной девиации
Запасные части судовых вспомогательных механизмов иностранной постройки. Насосы центробежные. Технические требования
Методические указания. Методы базирования нижней части штампа на монтажной плите
Методические указания. Методы базирования штампов на прессах простого и двойного действия