Анализ данных повторных и сравнительных исследований

Различают несколько видов повторных и сравнительных эмпирических исследований [230, с. 250-254].

(1) Международные и межрегиональные, цель которых - выявление общего и специфического в изучаемых социальных процессах и явлениях, где последнее обусловлено особенностями социально-экономической природы, культуры, истории отдельных стран или особенностями условий и образа жизни населения различных регионов одной страны.

(2) Панельные повторные исследования, проводимые по единой программе на той же самой выборке обследуемых и с использованием единой методики и процедур анализа данных. Это наиболее формализованный вид сравнительных исследований с определенным временным интервалом, их цель - анализ динамики, изменений в изучаемых аспектах.

(3) Повторные когортные исследования - особая разновидность панельных, отличающиеся тем, что выборочный объект — возрастная группа, изучаемая на протяжении достаточно длительного времени. Термин "когорта" заимствован из демографии, им обозначают людей одного поколения (и более строго - одного года рождения), прослеживая, как с течением времени меняются условия и образ жизни данной когорты, их интересы и образ мыслей [258].

(4) Повторные трендовые исследования, которые проводятся на аналогичных выборках или в рамках единой генеральной совокупности с интервалом во времени и с соблюдением относительно единой системы процедур для того, чтобы установить тенденции (тренды) социальных изменений и развития.

Общие правила, предъявляемые к сравнительному и повторному исследованию. Все разновидности повторных и сравнительных исследованийпредполагают:

Во-первых, соблюдение требований сопоставимости двух и более разовых исследований, будь то сравнение данных по разным странам и регионам или выявление тенденций и сдвигов во времени при анализе одного или аналогичных социальных объектов.

Во-вторых, обоснование существенности или несущественности различий по сравниваемым показателям в качественном и количественном аспектах.

С формальной точки зрения при сравнении эмпирических данных должны соблюдаться следующие правила, необходимые в логике экспериментального анализа:

(1) два состояния одного процесса сопоставимы, если они содержат хотя бы одно общее свойство или показатель;

(2) ни один фактор не может быть признан причиной сравниваемых явлений, если в одном случае при регистрации изучаемого явления он имеет место, а в другом - нет (правило сходства по Миллю);

(3) вместе с тем данный фактор не может быть причиной изучаемого явления, если в одном случае (исследовании) он имеет место, а само явление не фиксируется, хотя в другом случае (исследовании) дело обстоит так, что регистрируются и явления и данный фактор (правило различия по Миллю);

(4) наконец, некий фактор (условие, обстоятельства…) никоим образом не может достоверно считаться определяющим в отношении изучаемого процесса, если в другом случае (в другом исследовании) наряду с ним изучаемому процессу сопутствуют другие факторы [324, с. 267].

Эти логические правила, напоминающие нам о строгости экспериментального вывода, нельзя игнорировать. Но проблемы сравнительного анализа никоим образом не сводятся к формальным процедурам. Это, прежде всего — область содержательного, качественного изучения и только затем — формально-количественного. В каких именно аспектах сопоставимы и в каких — несопоставимы изучаемые объекты, каковы ограничения сопоставимости по объективным условиям, по составу и выборке обследуемых, по выделенным показателям для сравнения?

Особые трудности возникают в международных сравнительных исследованиях, где даже при соблюдении всех формальных правил единства методик исследования и выборки возникают проблемы, связанные с различием образа жизни, культуры, восприятия и реакции людей на одни и те же "стимулы" (например, вопросы анкеты). В разных странах различны стандарты благосостояния, системы образования, социально-профессиональные "дистанции", а в странах, принадлежащих к разным общественно-экономическим формациям, различны социальная структура, характер социальных отношений, мировоззрение и идеология, весь уклад жизни.

При интерпретации данных межнациональных (международных) исследований воздействие социально-экономических и социально-культурных факторов, конечно, выдвигается на первый план [276]. Но в методическом аспекте такое воздействие может быть аккуратно фиксировано при условии, что уже в разработке инструментария исследования качественные различия между странами приняты во внимание и на стадии пилотажа методик были предприняты соответствующие коррекции всех инструментов исследования. С этой целью производят аккуратное сопоставление главных параметров выборок: отнесение к социальной группе, выравнивание по уровню образования, другим подобным показателям социального статуса, а затем осуществляют утомительную работу по идентификации методик, особенно опросных. В последнем случае социально-культурные различия респондентов могут радикальнейшим образом повлиять на сопоставимость результатов межнационального исследования.

В межрегиональных исследованиях, широко осуществляемых ныне в нашей стране, крайне важно принимать во внимание всю доступную из государственной статистики информацию об особенностях экономических и социальных условий жизнедеятельности населения в сравниваемых регионах; сведения о производственном потенциале и развернутости инфраструктуры, о "поясных" различиях в уровне заработной платы (Крайний Север и Дальний Восток, например), о положении с трудовыми ресурсами и сведения о миграционных потоках, национальном составе и общей плотности населения и т.д.

В повторных и сравнительных исследованиях любого типа возникает вопрос об идентичности или сопоставимости методик сбора первичных данных. В межнациональных и межрегиональных исследованиях обычно используют единую методику. Иногда для той или иной страны (региона) к ней добавляют "вкладыш", т.е. дополнительные пункты информации, связанные с особыми условиями деятельности в данном регионе и особыми научно-практическими интересами организаторов исследования, заинтересованных в дополнительных данных по '"своему" региону, своей стране.

В повторных исследованиях дело осложняется тем, что с течением времени возникают новые явления и процессы, новые социальные проблемы, которые заранее не могли быть предвидены. Следовательно, методики "базового", т.е. первого, обследования не могут полностью и без изменений использоваться в повторных. Но тогда неясно, можно ли сравнивать данные, полученные разными методами.

Особый вопрос - определение интервала времени, в рамках которого целесообразны сравнительные исследования. Этот интервал определяется в "масштабе" изучаемых социальных процессов. В случае оценки организационных нововведений, повторное обследование проводится по схеме эксперимента "до - после" вскоре после реализации нововведения. В случае изучения социальных тенденций (трендовые исследования), "масштаб" сопоставления должен быть увеличен до нескольких лет в зависимости от проблематики исследования. Важно, однако, выдерживать более или менее единый интервал времени или же использовать неравные интервалы, но связанные с качественными изменениями в экономических и социальных условиях деятельности людей (например, переход на хозрасчетную организацию труда, введение новой системы школьного образования...).

Оценка существенности различий в сравнительном или повторном обследовании представляет собой довольно сложную и ответственную задачу методологического и методического характера. С методологической точки зрения она состоит в содержательном осмыслении и интерпретации "меры" различия изучаемых качественных процессов. Ведь философская категория меры относится к качественно-количественной определенности явлений. Накопление количественных изменений ведет к качественному сдвигу. Но где тот предел, за которым мы вправе говорить о существенном, качественном сдвиге?

В работах некоторых социологов можно часто встретить выражения: "Лишь столько-то процентов опрошенных сообщили, что..." или "Однако более чем столько-то процентов активно участвуют в такой-то деятельности". Слова "лишь" и "однако" указывают на социальную и нравственную позицию исследователя. Он тем самым дает понять, что в первом случае имеют место явления негативные, а во втором - позитивные. Между тем следует привести убедительные основания для оценки. В одном случае различие в 2—3% (если они статистически значимы) может быть существенно, в другом — и 20% расхождений практически еще не говорят о существенности сдвига. От каких факторов зависит оценка существенности различий?

(1) Прежде всего — от содержания изучаемых процессов, их "собственной", внутренней динамики, меры устойчивости и изменчивости данного процесса и явления. Такие формы и виды деятельности людей, как отношения в сфере труда, досуга, быта, т.е. в решающих компонентах их целостного образа жизни, обладают весьма высокой устойчивостью. Изменения в этих видах деятельности не могут происходить, что называется, ежечасно и ежедневно. Поэтому даже небольшие сдвиги и различия будут здесь важны и в принципе существенны для социального анализа. Изменения во взглядах и оценках, подверженные множеству случайных обстоятельств, должны оцениваться в ином "масштабе".

(2) Существенность различий зависит также от социальной значимости изучаемого явления. Чем больше значим данный процесс, тем более существенны даже малые изменения и различия, чем он менее значим для жизни общества или функционирования данного социального института, организации и т.д., тем шире будет диапазон вариаций, в рамках которых мы можем полагать явления существенно неразличающимися.

(3) С формально-статистической точки зрения существенность различий в фактических данных прямо зависит от численности сравниваемых подвыборок (чем меньше выборки, тем большие различия могут оказаться несущественными вследствие величины выборочной ошибки) и от величины ошибки фиксирования первичных данных.

Вспомним, что абсолютно точных измерений мы никогда не достигаем. Все данные фиксируются с определенной погрешностью, связанной и с природой изучаемого процесса, и с особенностями инструмента измерения, и с ошибкой выборки, и с субъективными ошибками исследователя. Значит, существенные различия сравниваемых в численном выражении данных должны непременно перекрывать величину ошибки, имевшей место при их первичной регистрации. Но, так как в сравнительных и повторных исследованиях мы имеем дело с удвоенной ошибкой измерения первичных характеристик (в одном и другом обследованиях), логично предположить, что существенный сдвиг фиксируется тогда, когда его величина перекрывает удвоенную ошибку первичной регистрации.