При проведении измерений необходимо отделять существенно несравнимые альтернативы от несравнимых альтернатив, допускающих косвенную сравнительную оценку.Так, например, если эксперт считает несравнимыми альтернативы у1 и у2, но в то же время считает альтернативу у1 более предпочтительной, а альтернативу у2 менее предпочтительной, чем у3, то можно с определенными оговорками считать у1 более предпочтительной, чем у2. Отношение R при наличии несравнимых альтернатив является отношением частичного порядка. В этом случае вводится понятие квазишкалы.Особенностью измерения и оценивания качества сложных систем является то, что для одной системы по разным частным показателям качества могут применяться любые из типов шкал от самых слабых до самых сильных. При этом для получения надежного значения показателя может проводиться несколько измерений. Кроме того, обобщенный показатель системы может представлять собой некую осредненную величину однородных частных показателей.При измерении и оценке физических величин обычно трудностей не возникает, так как перечисленные величины измеряются в абсолютной шкале. Измерение, например, ряда антропометрических характеристик осуществляется в шкале отношений. Более сложной является оценка в качественных шкалах. Однако отдельные показатели в процессе системного анализа уточняются, и, как следствие, появляется возможность от измерения и оценки в качественных шкалах перейти к оценке в количественных шкалах. В любом случае при работе с величинами, измеренными в разных шкалах, необходимо соблюдать определенные правила, которые не всегда очевидны.Проиллюстрируем широко распространенную ошибку при использовании балльной оценки. Пусть для экспертизы представлены две системы А и Б, оцениваемые по свойствам y1, y2, у3, у4. Качество каждой системы оценивается как среднеарифметическое по пятибалльной системе, но оценка в баллах является вследствие округления не совсем точной. Так, например, свойства, имеющие фактический уровень 2,6 и 3,4 балла, получат одинаковую оценку 3 балла. Результаты экспертизы приведены в табл.2.1. По фактическому качеству лучшей является система А, а по результатам экспертизы лучшей признают систему Б. Таким образом, способы измерения и обработки их результатов оказывают существенное влияние на результаты.Таблица 2.1 Пример балльной оценки свойств системСвойство системыСистема АСистема баллахистиннаяв оценка14,51312,514
Избежать ошибок можно, используя результаты, полученные в теории шкалирования, они определяют правила и перечень допустимых операций осреднения характеристик.
1) Проводить осреднение допускается только для однородных характеристик, измеренных в одной шкале. Осредняются только такие значения yi, которые представляют собой или оценки различных измерений одной и той же характеристики, или оценки нескольких различных однородных характеристик.Каждое значение показателя yt может иметь для исследователя различную ценность, которую учитывают с помощью коэффициентов значимости сi, причем ( сi = 1. Для получения осредненного значения показателя наиболее часто применяют основные формулы осреднения (табл.2.2).Простая и взвешенные средние величины различаются не только по величине (не всегда), по способу вычисления, но и по своей роли в решении задач системного анализа. При этом средневзвешенные величины используются для сравнения систем с учетом вклада различных факторов в осредненную оценку.Рассмотрим, например, среднее количество информации, получаемой из сети Интернет организацией, пользующейся услугами различных прикладных служб. Если эта средняя величина входит в систему показателей себестоимости, протоколов работы, типов используемых линий, то следует применять взвешенное среднее, так как произведение невзвешенного среднего на общую пропускную способность линий не даст количества полученной информации, поскольку служба электронной почты используется, например, значительно реже, чем WWW, и, следовательно, вносит меньший вклад в общее количество получаемой информации. Если же необходимо изучить связь количества получаемой информации с днем недели, то следует применять простое среднее количество информации за сутки, полностью абстрагируясь от различий между типами служб.Среднеарифметическое используется в случаях, когда важно сравнить абсолютные значения какой-либо характеристики нескольких систем. Например, скорость вывода на печать текстов (лист/мин) для различных печатающих устройств.Если при замене индивидуальных значений показателя на среднюю величину требуется сохранить неизменной сумму квадратов исходных величин (измерение вариации характеристики в совокупности), то в качестве средней следует использовать среднеквадратичное. Например, при определении местоположения источника радиоизлучения в радиоразведке вычисляется среднеквадратичное отклонение нескольких измерений.Таблица 2.2 Основные формулы осреднения показателейНаименованиеФормула
Средневзвешенное арифметическое EMBED Equation.3
Среднеарифметическое (СА), частный случай СВА при равнозначности измерений (сi = EMBED Equation.3