Під час оцінки рівня якості продукції у кваліметрії широко застосовуються також методи порівняння на основі експертних оцінок. Експертні методи порівняння базуються на шкаліруванні.
Під час використання методів порівняння застосовують одну з трьох шкал:
- шкалу рівнів;
- шкалу порядку;
- шкалу співвідношень.
Під час використання шкали рівнів з прийнятою величиною рівня Q порівнюються усі величини Qі за принципом (Qі – Q = ΔQ). Під час вимірювання за шкалою порядку проводиться ранжування об'єкта відповідно до рангів, що визначені експертами (Q1 < Q2 < Qn). При цьому застосовується метод попарного порівняння.
Перевага одного об'єкта над іншим позначено 1, ситуація навпаки - 0. Ранжувальний ряд - шкала порядку Q4 < Q5 < Q6 < Q2 < Q1 < Q 3. Можна використовувати більш досконалі критерії, наприклад, визначити кращу якість оцінкою 1, гіршу - оцінкою -1, а рівнозначне - 0.
У експертних оцінках використовують також шкалу порядку, фіксуючи в ній опорні точки (бали); наприклад, дванадцятибальну шкалу оцінки знань. Важлива також узгодженість думок експертів, яку можна визначити за коефіцієнтом конкордації, що розрахований за формулою, запропонованою Кендалом:
де S - сума квадратів відхилення оцінок рангів кожного об'єкта експертизи від середнього значення;
п - число експертів.
3. Інформаційно-методичне забезпечення