Экспертная оценка значимости групп критериев аккредитации органов по сертификации продукции
Аннотация
Сертификация декомпозиция аккредитация экспертный
На основе документов, устанавливающих требования к органам по сертификации продукции, выделены группы критериев, связанные с различными аспектами их деятельности. Предложена методика оценивания качества деятельности органов по сертификации, разработана схема декомпозиции требований аккредитации этих органов, проведена экспертная оценка коэффициентов весомости групп критериев методом попарного сопоставления.
Ключевые слова: орган по сертификации, критерии аккредитации, методика оценивания качества, декомпозиция требований, коэффициенты весомости, метод попарного сопоставления.
Abstract
On the basis of documents establishing requirements for bodies certifying products selected groups of criteria related to various aspects of their activities. The technique of estimation of quality of activity of certification bodies, developed by the decomposition of these requirements of accreditation bodies, expert evaluation of weighting factors of the criteria by the method of pairwise comparisons.
Keywords: the certification body, accreditation criteria, methods of quality assessment, decomposition of requirements, the weighting factors, the method of paired comparison.
В настоящее время основными документами, устанавливающими требования к органам по сертификации (ОС), являются ГОСТ Р ИСО/МЭК 17065-2012 "Оценка соответствия. Требования к органам по сертификации продукции, процессов и услуг" и Приказ Минэкономразвития России "Об утверждении Критериев аккредитации, перечня документов, подтверждающих соответствие заявителя, аккредитованного лица критериям аккредитации, и перечня документов в области стандартизации, соблюдение требований которых заявителями, аккредитованными лицами обеспечивает их соответствие критериям аккредитации" от 30.05.2014 г. № 326.
Эти документы и были взяты за основу для разработки критериев и показателей оценки качества деятельности органа по сертификации продукции.
Классификация критериев обусловлена ее целевым назначением и проводится по взаимосвязанным признакам, соответствующим этому назначению. Совокупность таких признаков позволяет распределить множество рассматриваемых критериев по определенным классификационным группировкам. При этом глубина классификации (число ступеней иерархии) должна быть достаточной для решения задач, связанных с оценкой деятельности организации и обобщением полученных результатов.
На основе анализа перечня критериев, приведенных в выше указанных документах, были выделены восемь групп критериев, связанных с аспектами деятельности органа по сертификации:
Группа 1. Общие требования к деятельности органа по сертификации;
Группа 2. Требования к структуре;
Группа 3. Требования к менеджменту (СМК);
Группа 4. Кадровое обеспечение;
Группа 5. Требования к ресурсам для оценки (внутренним и внешним);
Группа 6. Требования к процессу сертификации;
Группа 7. Документационное обеспечение;
Группа 8. Информационное обеспечение.
Каждая группа критериев включает в себя составляющие критериев, для оценки выполнения которых вводится 93 соответствующих показателя. Распределение показателей качества по группам критериев показано в таблице 1 и на рисунке 1.
Таблица 1 - Распределение показателей качества по группам критериев
Группы критериев, наименование |
Количество показателей |
Группа 1. Общие требования к деятельности органа по сертификации. |
9 |
Группа 2. Требования к структуре. |
9 |
Группа 3. Требования к менеджменту (СМК) |
26 |
Группа 4. Кадровое обеспечение |
9 |
Группа 5. Требования к ресурсам для оценки (внутренним и внешним) |
6 |
Группа 6. Требования к процессу сертификации |
18 |
Группа 7. Документационное обеспечение |
13 |
Группа 8. Информационное обеспечение |
3 |
Рисунок 1. Критерии оценки качества деятельности ОС
Чтобы получить комплексную оценку качества деятельности ОС, необходимо разработать методику оценивания качества, которая, среди прочих, включает и задачу проработки таких вопросов как построение дерева требований и определение коэффициентов весомости групп критериев. Именно эти вопросы и рассматриваются в данной работе.
Итак, имеем следующую постановку задачи. Имеется орган по сертификации, деятельность которого должна удовлетворять требованиям аккредитации - интегральному качеству, которое на рисунке 2 расположено на 0-ом уровне иерархии.
Требования аккредитации включают n групп критериев, где расположенных на 1-ом уровне иерархии, и составляющие критериев (подкритерии) , где, расположенные на 2-ом уровне иерархии.
Критерии, их составляющие характеризуются индикаторами (признаками), на основании которых дается оценка выполнения или не выполнения указанных критериев (подкритериев). Для оценки выполнения индикаторов рассматриваются их свидетельства - показатели (k-ый уровень иерархии).
Рисунок 2. Схема декомпозиции требований аккредитации органов по сертификации
Оценка качества деятельности ОС определяется как арифметическая средневзвешенная оценка качества выполнения отдельных групп критериев
, (1)
Где: - коэффициенты весомости групп критериев, нормированные таким образом, что ;
- оценка качества выполнения i-ой группы критериев, баллы.
Количественное значение оценки выполнения каждого критерия (подкритерия) , определяется через значения соответствующих показателей по формуле
, (2)
Где: - показатели оценки выполнения критериев (подкритериев);
- число показателей.
С целью определения коэффициентов весомости групп критериев на интегральный показатель была проведена экспертная оценка методом парного сопоставления (предпочтений), в которой приняли участие шесть экспертов органа по сертификации "САТР-Фонд".
Результаты экспертных оценок сводятся к заполнению экспертами таблиц, в которых предпочтение указываются номером группы критериев. Если эксперт указывает на равнозначность объектов экспертизы, это отображается в таблицах цифрой "0". В этом случае при подсчете количества предпочтений суммируется по 0,5 для каждого из равнозначных объектов.
Результаты попарного сопоставления объектов, выполненные первым экспертом, представлены в таблице 2.
Таблица 2 - Результаты попарного сопоставления групп критериев качества первым экспертом
Номер объекта Экспертизы |
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
Кол-во предпочтений |
Частота предпочтений |
1 |
X |
1 |
0 |
1 |
1 |
6 |
0 |
0 |
4,5 |
0,161 |
2 |
X |
3 |
0 |
0 |
6 |
7 |
0 |
1,5 |
0,054 | |
3 |
X |
3 |
3 |
0 |
0 |
0 |
5 |
0,179 | ||
4 |
X |
0 |
6 |
7 |
0 |
1,5 |
0,054 | |||
5 |
X |
6 |
7 |
0 |
1,5 |
0,054 | ||||
6 |
X |
0 |
0 |
5,5 |
0,196 | |||||
7 |
X |
7 |
5,5 |
0,196 | ||||||
8 |
X |
3 |
0,107 |
Частота предпочтений i-м экспертом j-го объекта экспертизы находится по формуле
(3)
Где: - число предпочтений i-м экспертом j-го объекта экспертизы;
С - общее число суждений одного эксперта, связанное с числом объектов экспертизы mсоотношением
(4)
В нашем случае
Коэффициенты весомости оцениваемых объектов экспертизы рассчитывают по формуле
(5)
Где: n - число экспертов в группе; m - число объектов экспертизы.
Показатели частот предпочтений, данные всеми экспертами, сведены в таблицу 3.
Таблица 3 - Частоты предпочтений групп критериев, данные экспертами
Номер эксперта |
Частоты предпочтений | |||||||
1 |
0,161 |
0,054 |
0,179 |
0,054 |
0,054 |
0,196 |
0,196 |
0,107 |
2 |
0,214 |
0,107 |
0,161 |
0,036 |
0,054 |
0,179 |
0,161 |
0,089 |
3 |
0,143 |
0,054 |
0,214 |
0,054 |
0,071 |
0,214 |
0,161 |
0,089 |
4 |
0,089 |
0,036 |
0,196 |
0,107 |
0,089 |
0,179 |
0,196 |
0,107 |
5 |
0,196 |
0,143 |
0,196 |
0,036 |
0,107 |
0,125 |
0,125 |
0,071 |
6 |
0,196 |
0,054 |
0,214 |
0,054 |
0,089 |
0,196 |
0,125 |
0,071 |
Итого |
0,999 |
0,448 |
1,160 |
0,341 |
0,464 |
1,089 |
0,964 |
0,534 |
Коэффициенты весомости, вычисленные по формуле (5), будут иметь следующие значения:
Сумма всех показателей весомости равна
Следовательно, ранжированный ряд по данным экспертной оценки имеет вид
Проведенный анализ показывает, что эксперты по значимости (важности) групп критериев отдают наибольшее предпочтение требованиям к менеджменту (СМК) и требованиям к процессу сертификации.
При подборе экспертов большое внимание уделяется согласованности их мнений, которая характеризуется оценкой дисперсии отсчета. За меру согласованности мнений экспертов принимается коэффициент конкордации
, (6)
Где: - сумма квадратов отклонений суммы рангов каждого объекта экспертизы от среднего арифметического значения;
- число экспертов;
- число объектов экспертизы.
Ставится задача определения степени согласованности мнений шести экспертов, которые оценивая восемь объектов экспертизы и классифицируя их по значимости, составили ранжированные ряды по возрастающей шкале порядка.
- 1 эксперт: ; 2 эксперт: ; 3 эксперт: ; 4 эксперт: ; 5 эксперт: ; 6 эксперт: .
Определим суммы рангов каждого из объектов экспертной оценки. принимая во внимание, что если между несколькими объектами при их оценке установлено отношение эквивалентности, то имеют место связанные ранги для объектов, входящих в классы эквивалентности. Значения связанных рангов определяются как среднее из чисел, характеризующих места эквивалентных объектов в упорядоченном ряду.
Наименее предпочтительному объекту присваивается ранг, равный единице, второму по предпочтительности - ранг, равный двум, и т. д.
: ;
: ;
: ;
: ;
: ;
: ;
: ;
: .
Определим коэффициент конкордации для оценки согласованности мнений экспертов.
С этой целью найдем среднее арифметическое рангов
И сумму квадратов отклонений суммы рангов каждого объекта экспертизы от среднего арифметического значения рангов
Тогда коэффициент конкордации
Что свидетельствует о высокой степени согласованности мнений экспертов.
Значимость W оценивают по критерию Пирсона (хи-квадрат)
Если то показатель W значим с установленной вероятностью. Значения приведены в таблице 4.
Таблица 4 - Значения квантиля - распределения при различном числе степеней свободы
Доверительная Вероятность P |
Значения при различных значениях | ||||||||||
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
9 |
10 |
11 | |
0,99 |
6,6 |
9,2 |
11,3 |
13,3 |
15,1 |
16,8 |
18,5 |
20,1 |
21,7 |
23,2 |
24,7 |
0,95 |
3.8 |
6,0 |
7,8 |
9,5 |
11,1 |
12,6 |
14.1 |
15,5 |
16,9 |
18,2 |
19,7 |
Сравним полученное значение с табличным при доверительной вероятности Р. Коэффициент конкордации значим при доверительной вероятности.
Список литературы
- 1. ГОСТ ISO/IEC Guide 65-2012 "Общие требования к органам по сертификации продукции". 2. Приказ Минэкономразвития Российской Федерации от 30.05.2014 г. № 326 "Об утверждении критериев аккредитации, перечня документов, подтверждающих соответствие заявителя, аккредитованного лица, критериям аккредитации, и перечня документов в области стандартизации, соблюдение требований которых заявителями, аккредитованными лицами обеспечивает их соответствие критериям аккредитации". 3. Романова Ю. В., Парфеньева И. Е. Оценка соответствия документов органа по сертификации продукции современным требованиям аккредитации // Инновации в науке: Сб. ст. по материалам LIV международной науч.-практ. конф. № 2 (51). Новосибирск: Изд. АНС "СибАК", 2016, С. 77-89.
Похожие статьи
-
Основу финансового анализа составляют его предмет, объект и методы исследования. Предмет финансового анализа, т. е. то, что изучается в рамках данной...
-
В тройку лидеров по применению в металлургической промышленности сейчас входят требования стандартов: ИСО 9000 (Система Менеджмента Качества); ИСО 14000...
-
В соответствии со стандартом № 8 термин "неотъемлемый риск" означает подверженность остатка средств на счетах бухгалтерского учета или группы однотипных...
-
Выборка может быть построена по сальдо или по обороту счета. В курсовой работе определение объема выборки осуществляется по сальдо счета в соответствии с...
-
Составление плана осуществляется в форме, указанной ниже. Руководителем аудиторской группы назначается студент, выполняющий курсовую работу, он же...
-
Оценка и учет готовой продукции - Бухгалтерский учет на предприятии
Понятие готовой продукции, первичные документы для ее признания Готовая продукция и товары наряду с материальными ресурсами согласно ПБУ 5/01 относятся к...
-
Понятие, классификация и оценка готовой продукции Конечным этапом производственного процесса является выпуск готовой продукции, в результате которого ее...
-
Документ делопроизводственный отчетность архив Взаимодействие человека с документами включает создание документов, их использование, доведение до...
-
Основополагающие принципы бухгалтерского учета, критерии их формирования и влияние на учетный процесс В условиях сложных проблемных этапов экономического...
-
В целом первая глава посвящена в большей степени теоретическим основам, базовым категориям, связанным с оценкой недвижимости. Во второй главе работы...
-
Организационно-экономическая характеристика ОАО "МегаФон" ОАО "МегаФон" - организация, созданная в 1993 г., одна из трех крупнейших операторов мобильной...
-
Заключение - Характеристика аудита себестоимости продукции
Смысл целей аудита заключается в том, чтобы создать некую структуру, которая помогла бы аудитору собрать нужное количество актуальных свидетельств, а...
-
Для оценки финансовой устойчивости предприятия проводят ее углубленный анализ. В практике анализа финансового состояния применяют как абсолютные, так и...
-
Таблица 13. Пограничные значения Z-счета Высокая угроза банкротства Менее 1,23 Зона неведения От 1,23 до 2,90 Низкая угроза банкротства Более 2,90...
-
Оценка показателей финансового-хозяйственной деятельности и анализ финансовой устойчивости предприятия Анализ финансово-хозяйственной деятельности играет...
-
Оценка существенности ошибок Аудиторские организации в ходе проведения проверок не должны устанавливать достоверность отчетности с абсолютной точностью,...
-
Оценка существенности искажений информации, системы внутреннего контроля, аудиторского риска и выборки в аудите социально-трудовых отношений Оценка...
-
Доходы - Поступление ден. средств или погашение обязательств, приводящее к увелич. капитала. 1. Доходами от обычных видов деятельности является выручка...
-
Оценка готовой продукции - Анализ продукции, работ и услуг на предприятии
Готовая продукция принимается к бухгалтерскому учету по фактической производственной себестоимости, равной соответственно сумме всех затрат на...
-
В ходе работы был проведен библиографический поиск в периодической печати положительных практик сертификации на тему: "Сертификация систем менеджмента...
-
Под свидетельством понимается любая информация, которую использует аудитор. Формы свидетельств различны вплоть до устных ответов клиентов, письменные...
-
Организационно-правовые формы юридических лиц Применяемая сегодня в России система организационно-правовых форм хозяйственной деятельности, введенная в...
-
Критерии отнесения хозяйствующих субъектов к малым предприятиям - Аудит малых предприятий в РК
Прежде всего, следует сказать, что под предпринимательством (зачастую, наряду с термином предпринимательство употребляется английский аналог - бизнес) в...
-
Экспертные комиссии организаций - Основные этапы по подготовке документов к архивному хранению
В организациях для проведения экспертизы ценности документов, созданных и полученных извне, создаются постоянно действующие экспертные комиссии....
-
В ходе работы была изучена Российская металлургическая промышленность и были освещены такие вопросы, как сертификация продукции в металлургической...
-
Переход на бюджетное финансирование предусматривает множество ограничений, связанных с ведением хозяйственной деятельности. Для института, который долгое...
-
Характеристика аудируемого лица: ООО "Зималето" - фабрика по пошиву одежды. Определение уровня существенности Уровень существенности определяется в...
-
Прежде чем начать предпринимательскую деятельность, организация должна располагать имуществом, денежными и другими средствами. В совокупности они...
-
Оценка финансового состояния предприятия - Порядок аудита финансовых результатов на предприятии
Финансовое состояние организации - это экономическая категория, которая оценивает финансовые отношения предприятия и его способность финансировать свою...
-
Заключение, Список использованной литературы - Оценка бизнеса ООО "Строитель"
Мы провели оценку предприятия тремя методами, на основании которых получили рыночную стоимость предприятия. Разница в стоимости при оценке различными...
-
Сравнительный подход в оценке рыночной стоимости предприятия - Оценка бизнеса ООО "Строитель"
Сравнительный подход позволяет оценить рыночную стоимость предприятий путем прямого сравнения оцениваемого предприятия с сопоставимыми, цены продажи...
-
Согласование результатов оценки жилой недвижимости - Методы оценки жилой недвижимости
Для оценки объекта жилой недвижимости - двухкомнатной квартиры, расположенной в Заельцовском районе г. Новосибирска - использовались методы доходного и...
-
Оценка жилой недвижимости методом сравнения продаж аналогов - Методы оценки жилой недвижимости
Сущность подхода заключается в сравнении оцениваемого объекта с другими объектами недвижимости, которые были выставлены на продажу. Основополагающим...
-
Оценка объекта жилой недвижимости, Описание объекта недвижимости - Методы оценки жилой недвижимости
Описание объекта недвижимости Объектом оценки является отдельная квартира, состоящая из двух жилых комнат. Целью оценки является определение стоимости...
-
Анализ финансовой устойчивости - Оценка бизнеса ООО "Строитель"
Одна из важнейших характеристик финансового состояния предприятия - стабильность его деятельности с позиции долгосрочной перспективы. Она связана, прежде...
-
Введение - Оценка бизнеса ООО "Строитель"
Основной задачей курсовой работы является проведение финансово-экономического анализа деятельности предприятия, выявление основных тенденций его развития...
-
Виды стоимости объектов недвижимости - Методы оценки жилой недвижимости
На начальной стадии оценки недвижимости перед экспертом-оценщиком всегда возникает сложная проблема выбора вида стоимости для проведения оценочных...
-
Классификация объектов недвижимости - Методы оценки жилой недвижимости
Оценка недвижимой собственности представляет интерес в первую очередь для объектов, активно обращающихся на рынке как самостоятельный товар. В настоящее...
-
Финансовая устойчивость -- составная часть общей устойчивости предприятия, сбалансированность финансовых потоков, наличие средств, позволяющих...
-
Оценка основных средств - Основные средства предприятия
В бухгалтерской отчетности подлежит раскрытию с учетом существенности как минимум следующая информация: О первоначальной стоимости и сумме начисленной...
Экспертная оценка значимости групп критериев аккредитации органов по сертификации продукции