О международной компоненте при оценивании качества вуза

Г.Г. АЗГАЛЬДОВ, главный научный сотрудник Центрального экономико-математического института Российской академии наук, доктор экономических наук

А.В. КОСТИН, начальник управления оценки инновационных проектов ЗАО «Центр передачи технологий», кандидат экономических наук

Российский рейтинг вузов

В мартовском номере журнала «АО» (№62) в статье «Российский рейтинг вузов. К вопросу об образовательной компоненте качества вузов» была рассмотрена первая из трёх – образовательная (учебная) компонента качества функционирования вуза. В предлагаемой статье описывается следующая – международная деятельность (см. рис. 1). Кроме того, поясняются некоторые операции, выполнение которых предусмотрено методикой построения Российского рейтинга вузов (РРВ)¹.

Определение эталонных q^эт и браковочных q^бр значений абсолютных показателей свойств: основные понятия.

Абсолютный показатель свой­ства Q – количественная характеристика свойства, определяющая степень его выраженности, проявления в специфической для каждого свойства шкале измерения. Например, коли­чество книг в университетской библиотеке на одного студента.

Значение абсолютного показателя свойства q – конкретное числовое значение, которое может принимать показатель  у данного свойства оцениваемого объекта. Например, количество книг в университетской библиотеке на одного студента q = 1000 экз.

Необходимо отметить, что иногда встречаются такие свойства, что значение их показателя q существенным образом зависит от объёма выборки, на основе которой оно определяется. Например, к таким свойствам относятся относительные показатели здоровья студентов вуза, для которых чем больше выборка, тем больше достоверность значений их показателей q (монотонно возрастающая от 0 до 1). Предложенная в статье [1] соответ­ствующая модель рекомендуется также и для оценивания качества изменяющихся во времени знаний, получаемых в вузе. Подход к потроению этой модели основан на сочетании формального аппарата теории графов и теории неаксиоматической логики [2].

В тех случаях, когда вместо цифр применяются буквы, значение показателя выражается малой буквой q (в отличие от показателя, обозначаемого большой буквой Q).

Эталонное значение абсолютного показателя свойств q^эт – наилучшее достигнутое в мире значение абсолютного показателя свойства (на период, когда производится оценивание качества, применительно к аналогичным объектам, выпускаемым где-то в мире). Например, скорость вычислений на ПЭВМ: q^эт = 200 млн. опер./сек.

Допустимое значение абсолютного показателя свойства q^доп – наихудшее, но все же допустимое значение абсолютного показателя свойства (на период, когда производится оценивание качества, применительно к аналогичным объектам, выпускаемым где-то в мире). Например, в 30-е – 60-е годы прошлого века нигде в мире ни в нормах проектирования, ни в архитектурной практике не допускалась высота жилой комнаты в городском жилом доме меньшая, чем 2,25 м. Значит, для того периода можно принять q^доп = 2,25 м.

Браковочное значение абсолютного показателя свойства q^бр – ближайшее к q^доп, но худшее значение показателя свойства. Применительно к примеру о высоте служебной комнаты, q^бр = 2,20 м.

Рисунок 1.

Увеличить изображение

Порядок определения эталонных и браковочных значений абсолютных показателей свойств.

Как уже говорилось, эталоные q_i^эт и браковочные q_i^бр значения абсолютных показателей свойств – специфические квалиметрические показатели, означающие самое лучшее значение абсолютного показателя и самое худшее, но допустимое его значение для каждого из i-х свойств на «дереве свойств». Они используются в квалиметрии при переводе значений абсолютных показателей свойств в значения относительных показателей свойств (см. разделы ниже). При этом применяются две группы методов:

• экспертные (наиболее часто);
• документальные (менее часто).

При использовании экспертного метода (э.м.) нужно ориентироваться на материал, изложенный выше, для случая, когда применяется упрощенный метод квалиметрии и численность экспертной группы не превышает 10 человек. Если же обстоятельства требуют более точных экспертных оценок, а потому и большей численности экспертной группы (э.г.), можно воспользоваться материалом, изложенным в монографии [3, стр. 156-169] и определить требуемую численность э.г.

Эталоные q_i^эт и браковочные q_i^бр значения абсолютных показателей свойств определяются только для тех свойств, которые на «поддереве свойств» (см. рис. 1) имеют номер не выше 72 и, таким образом, не простираются выше 6-го яруса. Эти крайние значения показателей абсолютных свойств определяются с помощью таблицы 1, где абстрактно проиллюстрирован пример порядка определения значений q_i^эт и q_i^бр.

Определение значений q^эт и q^бр для показателей свойств, не имеющих физических единиц измерения.

К подобным свойствам в полном «дереве» относятся, например, эстетические или некоторые эргономические свойства. А в неполном «дереве» – и любые другие сложные свойства.

Для таких свойств организационная группа (ОГ) назначает:

q^бр = 0% и q^эт = 100%.

Здесь и в дальнейшем q^эт и q^бр определяются только для свойств, находящихся на последнем, то есть самом высоком ярусе «дерева»).

Документальный метод определения q^эт и q^бр.

Из свойств, оставшихся на последнем ярусе «дерева», ОГ определяет те, для которых существуют документальные данные, позволяющие определить q^эт и q^бр.

Эти данные могут содержаться в книгах, отчетах по НИР, обзорах, проектно-конструкторской документации, каталогах продукции, выставочных проспектах, технических условиях и т.д. Понятно, что чем больше таких документов, тем точнее будут определены значения q^эт и q^бр.

Пусть ОГ нашла m документов, в которых содержатся данные, помогающие определить q^эт или q^бр. Тогда принцип их определения выражается формулами:

q_i^эт = sup { q_ij , j = 1,m}, где:
i – номер свойства по дереву;
j – номер документа, из которого получено значение q_ij;
sup (супремум) – оператор выделения самого лучшего значения из всего их множества.

Например, для общих площадей четырехомнатных квартир для преподавателей в университетском кампусе документальным методом получены наибольшие значения q_ij (в м²):

sup {250; 280; 190; 270; 200 } = 280 м2.
Аналогично: q^доп = inf {q_ij}, где:
inf (инфимум) – оператор выделения самого плохого значения из всего их множества.

Зная q_i^доп, ОГ легко определяет q_i^бр.

Экспертный метод определения q^эт и q^бр.

Этот метод должен применяться только по отношению к тем свойствам, для которых вообще нельзя было применить документальный метод или его применение оказалось нецелесообразным (из-за слишком больших затрат труда или времени на поиск документальных данных по q^эт или q^доп).

Технология экспертного определения q^эт и q^доп сходна с технологией экспертного определения значений коэффициентов важности g_i (опрос проводится в один тур или, если расхождения в оценках экспертов после первого тура больше 25 процентов, в два тура). Затем определяются средние по всем экспертам эталонные и браковочные значения показателя для всех свойств, находящихся на последнем ярусе «дерева». Эти средние значения и принимаются в качестве искомых значений.

Отличие от технологии определения значений коэффициентов важности: здесь свойства в анкете располагаются не группами, а каждое в отдельности. И, в отличие от технологии определения значений коэффициентов важности, при определении эталонных и браковочных значений показателей в анкету заносятся только свойства последнего яруса «дерева» свойств.
В следующем номере «АО» будет рассмотрена исследовательская компонента при оценивании качества функционирования вуза.

БИБЛИОГРАФИЯ

1. Everitt B. Medical Statistics from A to Z: A Guide for Clinicians and Medical Students. Cambridge University Press, 2006.
2. Wang P. From Inheritance Relation to Non-Axiomatic Logic // International Journal of Approximate Reasoning, 1994. Vol. 7, pp.1-74.
3. Азгальдов Г.Г. Теория и практика оценки качества товаров. Основы квалиметрии. – М., Экономика, 1982.
4. Квалиметрия для всех: Учеб. пособие/ Г.Г. Азгальдов, А.В. Костин, В.В. Садовов. – М.: ИнформЗнание, 2012. – 166 с. – http://www.labrate.ru/kostin/064571.pdf.

¹ Дерево свойств «Качество образования в вузе (рейтинг вуза)» – http://www.labrate.ru/kostin/quality-edu-tree.html. Источник: стр.157-159, Квалиметрия для всех: Учеб. пособие/ Г.Г. Азгальдов, А.В. Костин, В.В. Садовов. – М.: ИнформЗнание, 2012. – 166 с.