Источниками многих вопросов, включаемых в анкеты, являются не качественные исследования и не эмпирические исследования вообще, а иные информационные источники, как эмпирические, так и концептуальные. Общеизвестен факт, что любой мало-мальски квалифицированный исследователь может составить анкету, не прибегая к предварительным качественным исследованиям, а просто мобилизуя имеющийся в наличии запас знаний. В связи с этим невозможно дать однозначный ответ на вопрос о том, как лучше начинать разработку количественных инструментариев: с проведения неструктурированного качественного опроса или с разработки анкеты и последующей «обработки» ее в неструктурированных интервью. Вместе с тем, если анкета так или иначе создана, существует очень высокая вероятность того, что обсуждение с респондентами будет способствовать ее улучшению.
В начале своего развития техника анкетных опросов в существенной мере полагалась на респондентов в конструировании самих анкет. В методике была предусмотрена специальная процедура выявления новых вариантов ответов [9б]. Однако затем в анкетных опросах появилась очень сильная тенденция повторять уже существующие варианты ответов, выработанных в предшествующих опросах. Помимо экономии труда это оправдывалось тем. что уже отработанные варианты обладают определенной надежностью и значимостью. К сожалению, такие аргументы не всегда можно признать убедительными. Использование закрытых вопросов показывает лишь то, что вошло в перечень ответов, но ничего не говорит о том. что в них отсутствует. Часто варианты ответов лишь слабо коррелируют с характеристиками изучаемого критерия, значимость которого тоже неясна. Поскольку заимствованные варианты ответов разрабатываются вне живого контекста с участниками потенциального опроса, их использование часто может служить примером надежного измерения неподходящего критерия. Это подводит нас ко второму аспекту взаимодействия количественных и качественных методов, а именно к проблеме интерпретации результатов.
Интерпретация результатов исследований. Основной недостаток многих количественных опросов состоит в том, что их результаты не оцениваются вне рамок этак опросов. Такая самодостаточность, т. е. отсутствие адекватной триангуляции приводит к своего рода замыканию в себе. Подобно тому как производители товаров часто бывают очень удивлены тем, что они слышат от потребителей при проведении фокус-групп, авторы анкет могут быть не менее удивлены тем, что думают респонденты по поводу задаваемых им вопросов [41]. Часто бывает не менее интересно узнать, что думают респонденты и по поводу результатов количественных опросов, особенно если последние выглядят неожиданными или парадоксальными.
Таким образом, взаимодополнение количественных и качественных методов можете большой пользой осуществляться на всех этапах исследования. Качественные опросы могут помочь выявить и сформулировать проблемы, которые могут быть исследованы с помощью количественных опросов. Далее, они помогают выявлять и исправлять погрешности формализованных вопросников. Наконец, на стадии анализа качественные опросы могут служить для сбора разъясняющей и дополняющей информации, ставя своей целью развить аналитические аспекты исследования.
Отчеты об исследованиях, составленные на основе качественных опросов, обычно начинаются с предупреждения:
«Внимание, данное исследование проведено только как качественное. Его выводы не могут считаться достоверными без проведения количественных исследований». Ф. Рейнолдс и Д. Джонсон, не критикуя эту практику, рекомендуют и отчеты по количественным исследованиям начинать с аналогичного предупреждения. Учитывая, что респонденты часто не понимают, как нужно отвечать на заданные вопросы, вкладывать ли в них разные смыслы, они советуют честно писать: «Внимание, данное исследование проведено как чисто количественное. Выводы не могут считаться достоверными без проверки их с помощью фокус-групп» [68].
§ 3. 5. Фокус-группы и контент-анализ.
В предыдущей главе мы уже отмечали в несколько ином контексте, что стенографические записи групповых дискуссий обладают всеми необходимыми признаками текстового массива и в качестве таковых пригодны для обработки методом контент-анализа. Добавим к этому следующие замечания.
Контент-анализ, как и многие другие методы, имеет количественную и качественную составляющие. Качественная составляющая связана с поиском релевантных проблем кодировочных категорий, а количественная — с подсчетом частот их появления в тексте. Существует много проблем, в отношении которых валидной является лишь первая процедура, а именно, создание или пополнение списков изучаемых явлений либо их признаков. Дело в том, что частота упоминания в текстах того или иного явления никоим образом не может быть отождествлена с частотой их встречаемости в реальной действительности. В качестве примера может быть рассмотрено исследование, посвященное изучению факторов риска сердечных приступов, проведенное Морганом и Спенеш [95]. Исследование проводилось методом фокус-групп, состоявших из респондентов, недавно перенесших сердечные приступы и не являющихся врачами.