Надежность социологического измерения.

Надежность социологической информации - это характеристика, которая свидетельствует о том, что этой информации можно доверять. Надежность измерения и надежность отбора - два аспекта надежности социологической информации.

В психологии принято, что результаты измерения имеют устойчивый характер. Также необходимо условие валидности информации, наличия соответствия между тем, что надо измерить и тем, что измерили.

В социологии, надежность измерения имеет три аспекта:

1. Правильность измерения. Соответствие результата измерения какой-либо величины ее истинному значению. В социологии правильность определяется как наличие каких-то систематических ошибок, смещений, прежде всего, смещений в шкале. Таким образом достижение правильности - это устранение явных нарушений в шкале измерения. x=T+e, где T - истинная величина, x - результат измерения, а e - ошибка.

2. Степень сходства результатов при повторных измерениях. Апробируется какая-либо шкала на определенной группе респондентов, а через 2-3 недели та же группа респондентов оценивается по той же анкете. После проведения повторного опроса по каждому респонденту проводится сравнение результатов. Анонимность в анкетах отсутствует, но респонденты не беспокоятся об этом. Смотрят на повторяемость результатов, таким образом учитывается устойчивость.

3. Степень соответствия между тем, что измерили и тем, что хотят измерить. Эта проблема имеет и методический и теоретический аспект. Она связана с правильностью переведения теоретических понятий в операциональные, а затем, в эмпирические индикаторы. Предполагается, что если исследователь убедился во всех трех аспектах, то он может говорить о том, что измерение является надежным. Прежде всего проверяется надежность измерения при использовании порядковых оценочных шкал. Больше всего показателей - при проверке правильности измерения.

Недостаточная правильность измерения может проявляться в:

• отсутствии разброса в значениях по шкале, т.е. все респонденты отметили один вариант ответа, что говорит о том, что шкала построена неверно;
• респондентами используется лишь часть шкалы, например отрицательные значения шкалы избегаются респондентами, что говорит о том, что данная часть шкалы не работает;
• неравномерное использование отдельных пунктов шкал. Шкальное значение, выраженное в баллах, не должно существенно отличаться от соседних по частоте, или по числу респондентов. Если это отличие присутствует, то данное значение проверяется статистически. Критерием проверки служит X² (хи квадрат). Эмпирическое значение рассчитывается по определенной формуле (формула 1), где берется одна степень свободы. Полученное значение X² эмпирическое сравнивают с X² критическое. Если хи эмпирическое больше хи критического, то данная величина считается аномальной.
• наличие грубых ошибок в результатах измерения. Количественные признаки могут вызвать у социолога подозрения, что какой-то результат оказался выше или ниже другого результата. См. расчет ошибки измерения.

Существуют определенные формальные методы проверки обоснованности:

1. Выявление внешних согласованных признаков;

2. Выявление внутренней согласованности;

3. Выявление внешней и внутренней согласованности признаков, имеет отношение к построению индекса.

Если мы говорим о внутренней согласованности в построении логического квадрата, то основное формальное требование - тесная и положительная связь признаков, положенных в основу формируемого индекса, между собой. Внешняя согласованность- это такая же характеристика признаков определенной методики, которая проявляется в предсказании признаками данной методики реального поведения людей.

Шкалы установок.

Эти шкалы достаточно редко применяют в социологии, гораздо чаще в психологии. Они обычно определяют установку человека, его готовность к оценке какого либо объекта. Чтобы замерить это состояние, необходимо сформировать множество переменных, что реализуется через формирование определенных суждений или высказываний.

Известны три основных шкалы установок:

1. Шкала Терстоуна, известная как метод равных (или субъективно равных интервалов)

2. Шкала Лайкерта, или метод суммарных оценок

3. Шкала Гуттмана, или шкалограммный анализ Гуттмана.

Шкала Терстоуна

Процедура построения шкалы:

• формируются определенные суждения, до 300 штук, которые формируют степень развитости отношения респондента к объекту;
• число суждений уменьшается до 100-150, для того, чтобы покрыли весь континуум отношений к объекту от абсолютно отрицательных до абсолютно положительных; по отношению к объекту оценки может быть выражено множество оттенков отношения (например, от очень сильного предпочтения к очень сильному противодействию); наличие нейтрального отношения необходимо;
• далее, отбирается группа судей или экспертов (50-100); каждое суждение заносится на карточку в хаотической последовательности и в таком виде карточки предъявляются экспертам; задача эксперта распределить данные карточки с суждениями по 11 категориям: (а)сильное предпочтение, б)не очень сильное предпочтение, в)умеренное предпочтение, г)слабое предпочтение, д) очень слабое предпочтение, е)нейтральное отношение, ж)очень слабое противодействие, з)слабое противодействие, и)умеренное противодействие, к)сильное противодействие, л)очень сильное противодействие); данных категорий может быть и 7 и 9; каждый из экспертов при этом рассматривает расстояние между категориями как субъективно равный интервал;
• когда эксперты закончили свою работу, каждому суждению (у каждого конкретного эксперта) присваивается числовое значение, которое соответствует номеру той категории, к которой эксперт отнес данное суждение; при этом существует разброс мнений экспертов, так как эксперты относят по своему усмотрению предложенные суждения к разным категориям, их мнения не обязательно совпадают с мнениями других экспертов;
• далее каждое суждение проверяется на предмет единодушия экспертных оценок, для этого производится расчет квартильного отклонения по каждому суждению. Суждения с минимальным квартильным отклонением, а значит с максимальным экспертным единодушием, используются затем для построения рабочей шкалы;
• суждения с максимальным квартильным отклонением отбрасываются и уже в шкалу не вносятся;
• в шкале для массового опроса остаются 15-30 суждений, которые должны равномерно покрывать весь спектр мнений; данная шкала предъявляется респондентам в виде вопросника, где респондент может выбрать любое число суждений, с которыми он согласен; балл, который получит респондент в массовом опросе средней арифметической от балльных значений выбранных им суждений;
• полученная шкала является шкалой установок интервальным шкальным типом.

Шкала Лайкерта.

Процедура построения шкалы

• формируется большое число суждений, около 100. Данные суждения не имеют нейтральных значений и они не обязательно должны охватывать весь смысловой континуум, но они должны иметь ярко выраженное положительное либо отрицательное отношение к объекту;
• каждое суждение предъявляется экспертами, которые выражают свое к нему отношение по 5-ти балльной шкале (полностью согласен, согласен, нейтрален, не согласен, полностью не согласен);
• далее, для каждого эксперта социолог рассчитывает общий балл (за каждое суждение эксперт получает балл от 1 до 5, которые затем складываются по всем суждениям);
• затем каждое суждение сравнивается с остальными суждениями; для этого строится таблица сопряженности, причем на ее основе рассчитывается коэффициент корреляции, который показывает тесноту связи данного вопроса с итоговым показателем; в основе таблицы сопряженности лежит два показателя: балл эксперта по проверяемому вопросу (от 1 до 5), разность между общим баллом эксперта и баллом проверяемого вопроса;
• вопросы с отрицательными и малыми корреляциями "выбрасываются"; в общей сложности должно остаться около 20 суждений; получается порядковая шкала;
• в процессе массового опроса респондент отвечает на эти 20 вопросов и получает суммированный балл.

Шкала Гуттмана.

Процедура построения шкалы

• отбираются около 100 суждений, которые затем раздаются группе 50 - 100 экспертов, каждый из которых выражает согласие или несогласие с каждым из суждений;
• по результатам опроса строится шкалограмма, которая представляет собой матрицу, строками которой являются респонденты, а столбцами - суждения; согласие респондента с суждением в шкалограмме обозначается знаком "+", несогласие знаком "-";
• далее рассчитывается число баллов, которые получил каждый респондент и каждый вопрос, причем каждый "+" засчитывается за 1 балл;
• следующий шаг - построение новой шкалограммы, в которой респонденты упорядочиваются по числу набранных ими баллов, от большего к меньшему;
• на основе второй шкалограммы строится третья, в которой по такому же принципу упорядочиваются вопросы;
• далее, шкалограмма сравнивается с идеальной шкалой, рассчитывается коэффициент воспроизводимости r, который в идеале должен составлять: r = 0.90 (90%).