Обоснование качества измерительного инструмента для оценки удовлетворенности персонала предприятием

Размещено на http://www.allbest.ru/

Размещено на http://www.allbest.ru/

Обоснование качества измерительного инструмента для оценки удовлетворенности персонала предприятием

Т.П. Можаева, В.А. Ерохина, О.А. Горленко

Аннотация

Рассмотрен подход к обоснованию состоятельности измерительного инструмента (анкеты), применяемого при оценке удовлетворенности персонала своим трудовым положением в системе менеджмента качества предприятия. Аргументирована целесообразность применения статистических методов для подтверждения качества используемого в исследовании измерительного инструмента.

Ключевые слова: мониторинг, качество, измерительный инструмент, алгоритм оценки, валидность, надежность, статистическое обоснование.

В условиях усиления роли человеческих ресурсов в системе менеджмента качества (СМК) организации особое значение приобретает надежная и своевременная информация о степени удовлетворенности персонала как внутреннего потребителя системой вознаграждения, предлагаемой ему за качественный и производительный труд. В соответствии с требованиями международных стандартов ИСО 9000 [1] организация должна проводить мониторинг информации, касающейся восприятия потребителем выполнения организацией его требований, как одного из способов измерения работы СМК. При этом должны быть установлены методы получения и использования этой информации.

В контексте данного подхода особую актуальность приобретает обоснование качества измерительного инструмента, где под инструментом понимают составляемые аудиторами опросные листы, анкеты, тесты и т.п. Анализ практик мониторинга процессов менеджмента человеческих ресурсов показывает, что аудиторы достаточно редко используют статистические методы обоснования соответствия применяемых ими анкет (тестов) их целевому предназначению, принимая их априорно пригодными для исследования. Данная практика может приводить к получению надежной, точной, но не имеющей прямого отношения к объекту исследования информации.

В этой связи представляется целесообразной разработка и применение алгоритма мониторинга измерительного инструмента для оценки удовлетворенности персонала своим трудовым положением в организации, позволяющего обеспечить качество анкеты (теста) и обосновать возможность ее использования для конкретного исследования. Обоснование качества измерительного инструмента предусматривает реализацию следующих мероприятий (рисунок):

- оценка эмпирической валидности инструмента, т. е. соответствия результатов инструмента той характеристике, для измерения которой он предназначен;

- оценка надежности инструмента путем определения его согласованности, т. е. степени однородности состава заданий с точки зрения измеряемой характеристики;

- оценка надежности инструмента путем определения его устойчивости, т. е. свойства инструмента давать при повторном измерении близкие результаты;

- подтверждение соответствия использования инструмента целям исследования или, при наличии несоответствий, разработка или выбор нового инструмента.

Оценка измерительного инструмента (анкеты), применяемого для выявления степени удовлетворенности персонала своим трудовым положением, проводилась на промышленном предприятии Брянской области. В качестве измерительного инструмента предлагалась разработанная анкета, базирующаяся на известной модели конкурирующих ценностей К. Камерона и Р. Куинна [2] и адаптированная к российской действительности.

В качестве независимых экспертов при оценке предлагаемого инструмента выступили ведущие сотрудники и руководители предприятия (13 человек).

Обоснование эмпирической валидности авторского инструмента базируется на наличии тесноты ранговой корреляции между авторской и апробированной анкетами: если существует корреляционная связь между данными, полученными при изучении объекта различными инструментами, и один из них уже является валидным (апробированным), то и другой также может рассматриваться как валидный. В качестве апробированной анкеты использовалась анкета модели конкурирующих ценностей К. Камерона и Р. Куинна - инструмент оценки организационной культуры (OCAI - Organizational Culture's Analyze Instrument) [2].

Для установления эмпирической валидности инструмента проводится пилотное исследование, в ходе которого респонденты оценивают исследуемый объект при помощи альтернативных анкет: авторской и эталонной.

Рис. 1 Алгоритм оценки качества измерительного инструмента (анкеты)

Связь между результатами измерения по авторской и эталонной анкетам определяется расчетом коэффициента ранговой корреляции Спирмена [3]:

,

где r_i и s_i - ранги i-го объекта по авторской и альтернативной анкетам; n - число наблюдений (респондентов).

Ранговые оценки организационных культур на основе альтернативных анкет представлены в табл. 1.

Таблица 1 Ранговые оценки организационных культур на основе предлагаемой (авторской) анкеты и анкеты OCAI

Возможность применения авторской анкеты требует обоснования статистической значимости коэффициента корреляции Спирмена по выборке из n элементов, определяемой путем сравнения эмпирического и критического значений t-критерия Стьюдента (с f = n-2 степенями свободы и уровнем значимости б = 0,05):

t > t_{1-б; n-2} ,

где с - коэффициент корреляции Спирмена; n - число наблюдений (респондентов); t_1-б;n-2 - критическое значение t-критерия Стьюдента. При с ? 0,71 и t >t_1-б;n-2 коэффициент корреляции Спирмена признается статистически значимым, а исследуемый инструмент (авторская анкета) - валидным [4; 5].

В нашем случае полученные данные подтверждают гипотезу о статистической значимости коэффициент корреляции Спирмена (с = 0,75 > 0,71; t =3,7920 > t_0,95;11 =2,20) и признании исследуемого инструмента эмпирически валидным.

Надежность как внутренняя согласованность определяется связью каждого конкретного элемента анкеты с общим результатом, тем, насколько каждый элемент измеряет признак, на который направлен весь инструмент. Для проверки внутренней согласованности применяется метод расщепления (метод раздельного коррелирования), предусматривающий разделение анкеты на две равные части (например, четные и нечетные вопросы, первая и вторая половины опросного материала) и нахождение корреляции между ними.

Данные исследования надежности анкеты по критерию согласованности представлены в табл. 2.

Таблица 2 Данные исследования надежности материала анкеты по критерию согласованности

Примечания: i - номер респондента; x_i - результаты выбора i-го респондента в части анкеты, относящейся к альтернативе А; y_i - результаты выбора i-го респондента в части анкеты, относящейся к альтернативе В.

Обоснование надежности анкеты по признаку ее согласованности может быть проведено на основе вычисления коэффициента надежности Спирмена-Брауна (r_нт), базирующегося на значении коэффициента корреляции (r_xy) между двумя частями анкеты:

.

При коэффициенте r_нт ? 0,71 и подтверждении его статистической значимости на основе t-критерия Стьюдента можно утверждать о надежности материала анкеты по критерию согласованности [4; 5]. В нашем случае критерий надежности принимает значение r_нт = 0,98 > 0,71, что свидетельствует о высокой надежности исследуемого инструмента по признаку согласованности.

Статистическая значимость коэффициента корреляции, используемого при расчете коэффициента надежности Спирмена-Брауна, устанавливается аналогично определению эмпирической валидности инструмента (анкеты), но в данном случае в формулу подставляется не число респондентов n, а m - число пунктов анкеты:

t > t_1-0,05;m/2-2 ,

где r_xy - коэффициент корреляции между двумя частями анкеты; m - число пунктов анкеты; t_1-0,05;m/2-2 - критическое значение t-критерия Стьюдента.

Предлагаемая анкета является статистически надежной по критерию согласованности, так как выполняются условия: коэффициент корреляции r_xy = 0,95 > 0,71 (коэффициент надежности Спирмена-Брауна r_нт = 0,98 > 0,71), эмпирическое и критическое значения t -критерия Стьюдента отвечают неравенству t = 13,0493 > t_0,95;18 =10.

Надежность как устойчивость определяется с помощью метода ретеста [4; 5]. В соответствии с данным методом предусматривается проведение нескольких замеров с некоторым промежутком времени (от недели до двух месяцев) одним и тем же инструментом. Для того чтобы признать надежность (устойчивость) тестируемого инструмента, следует проверить выполнение следующих условий:

- статистически значимое значение коэффициента корреляции (r_xy ? 0,71) между данными первого и повторного опросов респондентов (t > t_1-б;n-2);

- статистически незначимые различия в средних значениях , , полученных при первичном и повторном анкетировании (t < t_1-б;n1+n2-2).

Результаты опросов респондентов представлены в табл.3.

Таблица 3 Результаты исследования надежности материала анкеты по критерию устойчивости

Примечания: i - номер респондента; x_i, y_i - суммированные баллы по исследуемой ценности соответственно в первом и повторном опросах одной выборки респондентов; , - средние значения баллов респондентов по исследуемым ценностям соответственно в первом и повторном опросах; , - выборочные дисперсии соответственно в первом и повторном опросах.

В нашем случае очевидно наличие сильной связи между полученными результатами: r_xy= 0,91 > 0,71. Возможность применения авторской анкеты требует обоснования статистической значимости коэффициента корреляции. Коэффициент корреляции признается статистически значимым при уровне значимости б = 0,05 и числе степеней свободы f = n-2 при выполнении следующего неравенства:

t > t_1-б;n-2 ,

где r_xy - коэффициент корреляции между результатами первого и повторного анкетирования; n - число наблюдений (респондентов); t_1-0,05;n-2 - табличное значение t-критерия Стьюдента. Имеем t = 7,2795 > t_0,95;11 =2,20. Полученные результаты свидетельствуют о статистической значимости коэффициента корреляции.

Статистическая значимость различий в средних значениях при небольших выборках определяется на основе t-критерия Стьюдента. При этом, чтобы различия в средних значениях, полученных при первичном и повторном анкетировании, рассматривались как статистически незначимые, необходимо провести сравнение эмпирического и критического значений t-критерия Стьюдента (с f = n₁+n₂-2 степенями свободы и уровнем значимости б = 0,05), отвечающее требованию выполнения неравенства t <t_{1-б;n1+n2- 2.}

Для обоснования статистически незначимых различий в средних значениях, полученных при первичном и повторном анкетировании, вначале проверяется равенство дисперсий и с помощью F-критерия Фишера. Если обозначить через большую из сравниваемых дисперсий, а через меньшую, то при выполнении неравенства дисперсии можно рассматривать как однородные:

F = <F_{(1-a); f1;f2} .

Поскольку в нашем случае дисперсии = 14304,6667 и = 13933,3333 однородны, а среднеквадратическое отклонение S = 118,8234, то несущественные различия в средних значениях, полученных при первичном и вторичном тестировании, подтверждаются на основе применения t-критерия Стьюдента и при выполнении следующего неравенства:

,

где , - средние значения оценок, полученных при первичном и повторном опросах; S - среднеквадратическое отклонение оценок, полученных при опросе; n_x, n_y - число наблюдений (респондентов) при первичном и повторном опросах; - критическое значение t-критерия Стьюдента.

Предлагаемый авторский инструмент может быть признан надежным по критерию устойчивости, так как одновременно выполняются условия о статистической значимости коэффициента корреляции (r_xy= 0,91 > 0,71 при t = 7,2795 > t_0,95;11 =2,20) и статистически незначимых различиях в средних значениях, полученных при первичном и повторном тестировании (t=0< t_{(1-0,05/2);24}=2,06).

Полученные результаты позволяют сделать вывод о том, что авторская анкета, разработанная для оценки удовлетворенности персонала своим положением на предприятии, обладает состоятельностью и может быть использована в исследовании.

С учетом того, что в современных условиях развития организация должна достаточно корректно определять, собирать и анализировать соответствующую информацию для демонстрации пригодности, результативности и постоянного повышения эффективности ее кадровых процессов и СМК в целом, особое значение придается методам и инструментам получения такой информации. Применение статистических методов для обоснования качества измерительного инструмента при проведении мониторинга кадровых процессов СМК организации позволяет не только определить качество используемого в исследовании инструмента, но и повысить уровень надежности получаемых при этом данных.

анкета персонал трудовой качество

Список литературы

1. ГОСТ Р ИСО 9001-2008. Системы менеджмента качества. Требования.

2. Камерон К. Диагностика и изменение организационной культуры / К. Камерон, Р. Куинн; пер. с англ. под ред. И.В. Андреевой. - СПб.: Питер, 2001. - 320 с.

3. Кремер, Н.Ш. Теория вероятностей и математическая статистика: учеб. для вузов / Н.Ш. Кремер. - М.: ЮНИТИ-ДАНА, 2000. - 543с.

4. Аванесов В.С. Тест в социологическом исследовании / В.С. Аванесов. - М.: Наука, 1982. - 193с.

5. Крокер Л. Введение в классическую и современную теорию тестов / Л. Крокер, Дж. Алгина. - М.: Логос, 2010. - 668с.

Размещено на Allbest.ru