Экспертная оценка значимости групп критериев аккредитации органов по сертификации продукции

Размещено на http://www.allbest.ru/

ЭКСПЕРТНАЯ ОЦЕНКА ЗНАЧИМОСТИ ГРУПП КРИТЕРИЕВ АККРЕДИТАЦИИ ОРГАНОВ ПО СЕРТИФИКАЦИИ ПРОДУКЦИИ

EXPERT EVALUATION OF THE IMPORTANCE OF GROUPS

OF CRITERIA OF ACCREDITATION OF CERTIFICATION BODIES PRODUCTS

Стрельникова Надежда Викторовна

магистр Московского государственного машиностроительного университета (МАМИ),

РФ, г. Москва

Аннотация

сертификация декомпозиция аккредитация экспертный

На основе документов, устанавливающих требования к органам по сертификации продукции, выделены группы критериев, связанные с различными аспектами их деятельности. Предложена методика оценивания качества деятельности органов по сертификации, разработана схема декомпозиции требований аккредитации этих органов, проведена экспертная оценка коэффициентов весомости групп критериев методом попарного сопоставления.

Ключевые слова: орган по сертификации, критерии аккредитации, методика оценивания качества, декомпозиция требований, коэффициенты весомости, метод попарного сопоставления.

Abstract

On the basis of documents establishing requirements for bodies certifying products selected groups of criteria related to various aspects of their activities. The technique of estimation of quality of activity of certification bodies, developed by the decomposition of these requirements of accreditation bodies, expert evaluation of weighting factors of the criteria by the method of pairwise comparisons.

Keywords: the certification body, accreditation criteria, methods of quality assessment, decomposition of requirements, the weighting factors, the method of paired comparison.

В настоящее время основными документами, устанавливающими требования к органам по сертификации (ОС), являются ГОСТ Р ИСО/МЭК 17065-2012 «Оценка соответствия. Требования к органам по сертификации продукции, процессов и услуг» и Приказ Минэкономразвития России «Об утверждении Критериев аккредитации, перечня документов, подтверждающих соответствие заявителя, аккредитованного лица критериям аккредитации, и перечня документов в области стандартизации, соблюдение требований которых заявителями, аккредитованными лицами обеспечивает их соответствие критериям аккредитации» от 30.05.2014 г. № 326.

Эти документы и были взяты за основу для разработки критериев и показателей оценки качества деятельности органа по сертификации продукции.

Классификация критериев обусловлена ее целевым назначением и проводится по взаимосвязанным признакам, соответствующим этому назначению. Совокупность таких признаков позволяет распределить множество рассматриваемых критериев по определенным классификационным группировкам. При этом глубина классификации (число ступеней иерархии) должна быть достаточной для решения задач, связанных с оценкой деятельности организации и обобщением полученных результатов.

На основе анализа перечня критериев, приведенных в выше указанных документах, были выделены восемь групп критериев, связанных с аспектами деятельности органа по сертификации:

Группа 1. Общие требования к деятельности органа по сертификации;

Группа 2. Требования к структуре;

Группа 3. Требования к менеджменту (СМК);

Группа 4. Кадровое обеспечение;

Группа 5. Требования к ресурсам для оценки (внутренним и внешним);

Группа 6. Требования к процессу сертификации;

Группа 7. Документационное обеспечение;

Группа 8. Информационное обеспечение.

Каждая группа критериев включает в себя составляющие критериев, для оценки выполнения которых вводится 93 соответствующих показателя. Распределение показателей качества по группам критериев показано в таблице 1 и на рисунке 1.

Таблица 1 - Распределение показателей качества по группам критериев

Рисунок 1. Критерии оценки качества деятельности ОС

Чтобы получить комплексную оценку качества деятельности ОС, необходимо разработать методику оценивания качества, которая, среди прочих, включает и задачу проработки таких вопросов как построение дерева требований и определение коэффициентов весомости групп критериев. Именно эти вопросы и рассматриваются в данной работе.

Итак, имеем следующую постановку задачи. Имеется орган по сертификации, деятельность которого должна удовлетворять требованиям аккредитации - интегральному качеству, которое на рисунке 2 расположено на 0-ом уровне иерархии.

Требования аккредитации включают n групп критериев , где расположенных на 1-ом уровне иерархии, и составляющие критериев (подкритерии) , где , расположенные на 2-ом уровне иерархии.

Критерии, их составляющие характеризуются индикаторами (признаками), на основании которых дается оценка выполнения или не выполнения указанных критериев (подкритериев). Для оценки выполнения индикаторов рассматриваются их свидетельства - показатели (k-ый уровень иерархии).

Рисунок 2. Схема декомпозиции требований аккредитации органов по сертификации

Оценка качества деятельности ОС определяется как арифметическая средневзвешенная оценка качества выполнения отдельных групп критериев

, (1)

где: - коэффициенты весомости групп критериев, нормированные таким образом, что ;

- оценка качества выполнения i-ой группы критериев, баллы.

Количественное значение оценки выполнения каждого критерия (подкритерия) , определяется через значения соответствующих показателей по формуле

, (2)

где: - показатели оценки выполнения критериев (подкритериев);

- число показателей.

С целью определения коэффициентов весомости групп критериев на интегральный показатель была проведена экспертная оценка методом парного сопоставления (предпочтений), в которой приняли участие шесть экспертов органа по сертификации «САТР-Фонд».

Результаты экспертных оценок сводятся к заполнению экспертами таблиц, в которых предпочтение указываются номером группы критериев. Если эксперт указывает на равнозначность объектов экспертизы, это отображается в таблицах цифрой «0». В этом случае при подсчете количества предпочтений суммируется по 0,5 для каждого из равнозначных объектов.

Результаты попарного сопоставления объектов, выполненные первым экспертом, представлены в таблице 2.

Таблица 2 - Результаты попарного сопоставления групп критериев качества первым экспертом

Частота предпочтений i-м экспертом j-го объекта экспертизы находится по формуле

(3)

где: - число предпочтений i-м экспертом j-го объекта экспертизы;

С - общее число суждений одного эксперта, связанное с числом объектов экспертизы mсоотношением

(4)

В нашем случае

Коэффициенты весомости оцениваемых объектов экспертизы рассчитывают по формуле

(5)

где: n - число экспертов в группе; m - число объектов экспертизы.

Показатели частот предпочтений , данные всеми экспертами, сведены в таблицу 3.

Таблица 3 - Частоты предпочтений групп критериев, данные экспертами

Коэффициенты весомости, вычисленные по формуле (5), будут иметь следующие значения:

Сумма всех показателей весомости равна

Следовательно, ранжированный ряд по данным экспертной оценки имеет вид

Проведенный анализ показывает, что эксперты по значимости (важности) групп критериев отдают наибольшее предпочтение требованиям к менеджменту (СМК) и требованиям к процессу сертификации.

При подборе экспертов большое внимание уделяется согласованности их мнений, которая характеризуется оценкой дисперсии отсчета. За меру согласованности мнений экспертов принимается коэффициент конкордации

, (6)

где: - сумма квадратов отклонений суммы рангов каждого объекта экспертизы от среднего арифметического значения;

- число экспертов;

- число объектов экспертизы.

Ставится задача определения степени согласованности мнений шести экспертов, которые оценивая восемь объектов экспертизы и классифицируя их по значимости, составили ранжированные ряды по возрастающей шкале порядка.

1 эксперт: ;

2 эксперт: ;

3 эксперт: ;

4 эксперт: ;

5 эксперт: ;

6 эксперт: .

Определим суммы рангов каждого из объектов экспертной оценки. принимая во внимание, что если между несколькими объектами при их оценке установлено отношение эквивалентности, то имеют место связанные ранги для объектов, входящих в классы эквивалентности. Значения связанных рангов определяются как среднее из чисел, характеризующих места эквивалентных объектов в упорядоченном ряду.

Наименее предпочтительному объекту присваивается ранг, равный единице, второму по предпочтительности - ранг, равный двум, и т. д.

: ;

: ;

: ;

: ;

: ;

: ;

: ;

: .

Определим коэффициент конкордации для оценки согласованности мнений экспертов.

С этой целью найдем среднее арифметическое рангов

и сумму квадратов отклонений суммы рангов каждого объекта экспертизы от среднего арифметического значения рангов

Тогда коэффициент конкордации

что свидетельствует о высокой степени согласованности мнений экспертов.

Значимость W оценивают по критерию Пирсона (хи-квадрат)

Если то показатель W значим с установленной вероятностью. Значения приведены в таблице 4.

Таблица 4 - Значения квантиля - распределения при различном числе степеней свободы

Сравним полученное значение с табличным при доверительной вероятности Р. Коэффициент конкордации значим при доверительной вероятности .

Список литературы

1. ГОСТ ISO/IEC Guide 65-2012 «Общие требования к органам по сертификации продукции».

2. Приказ Минэкономразвития Российской Федерации от 30.05.2014 г. № 326 «Об утверждении критериев аккредитации, перечня документов, подтверждающих соответствие заявителя, аккредитованного лица, критериям аккредитации, и перечня документов в области стандартизации, соблюдение требований которых заявителями, аккредитованными лицами обеспечивает их соответствие критериям аккредитации».

3. Романова Ю.В., Парфеньева И.Е. Оценка соответствия документов органа по сертификации продукции современным требованиям аккредитации // Инновации в науке: Сб. ст. по материалам LIV международной науч.-практ. конф. № 2 (51). Новосибирск: Изд. АНС «СибАК», 2016, С. 77-89.

Размещено на Allbest.ru