В частности, пилотироваться может не только вопросник, но и, например, выборка (т. е. проверяться доступность респондентов, реалистичность избранной процедуры их поиска и т. п. ), процедура опроса (время, место и способ организации опроса, продолжительность заполнения анкеты) и ряд других параметров обследования. При пилотировании собственно вопросника предметом пилотажа могут быть сами вопросы, структура и композиция анкеты, а также проблематика исследования. Рассмотрение всего комплекса этих проблем, т. е. описание различных видов пилотажных исследований, представляется важным, но не это входит в задачу данного параграфа. Его задачей является описание лишь некоторых видов пилотажа, связанных с применением глубокого интервью.
Наиболее приемлемым для пилотажного исследования мы считаем часто используемый психологами метод заполнения респондентом теста или вопросника, «рассуждая при этом вслух». Иными словами, респонденту следует предложить ознакомиться с готовым вариантом анкеты и заполнить ее, сообщая при этом интервьюеру все мысли, ассоциации и затруднения, которые приходят в голову. В хорошо отработанной анкете таких сопутствующих мыслей и затруднений будет немного. Вопросы, логическое членение которых доведено до конца и которые понятны респонденту, обычно заполняются сразу и не вызывают никаких устных комментариев. Иначе обстоит дело с разного рода «неадекватными» вопросами. Ответом на один такой вопрос вполне может стать длительное интервью, которое покажет полное несоответствие анкеты изучаемой проблематике.
Следует отметить, что многие проблемы неадекватности вопросов и вопросников освещены в отечественной литературе. В частности, довольно часто говорится об ограничениях, связанных с памятью респондентов, об узости их языковых возможностей (по причине, например, невысокого уровня образования), о личном или интимном характере вопросов и о ряде других факторов. Не отрицая важности этих аспектов, мы хотим сосредоточить внимание на главном, с нашей точки зрения, недостатке отечественных анкет, а именно – на своего рода «когнитивных» затруднениях, вызываемых у респондентов неправильно поставленными вопросами. Под «неправильными» вопросами мы, в частности, понимаем:
– сложные вопросы большого логического объема, не «вмещающиеся» в список закрытий, даже если последний содержит 10-15 и более пунктов;
– вопросы, содержащие разного рода логические пороки («двойной» вопрос, противоречиво сформулированный вопрос, неоднозначный по смыслу и т. п. );
– вопросы, содержащие презумпции, противоречащие знаниям или представлениям респондента;
– вопросы, знания или представления о которых вообще отсутствуют в сознании респондента;
– вопросы, в которых респондент не находит того типологического случая, к которому относится он сам (к примеру, если спросить в анкете, кто в основном занимается ребенком, отец или мать, а реально ребенок живет у бабушки, то респондент, строго говоря, не может ответить на такой вопрос, хотя в действительности он обычно как-то на него отвечает).
Для иллюстрации того, что такое неадекватный вопрос и как он работает, приведем следующую сцену, взятую из реальной социологической жизни (опрашивался директор животноводческой фермы):
«Интервьюер (читает вопрос анкеты): Приходилось ли Вам за последние два месяца внедрять какие-либо инновации?
Респондент (думает, затем спрашивает): А что такое инновации?
Интервьюер: Ну, это если Вы внедрили у себя что-то новое...
Респондент (думает, затем спрашивает): Вот две недели назад я две проржавевшие оцинкованные ванны выбросил и заменил пластмассовыми. Это инновация?
Интервьюер (думает, затем отвечает): Да, пожалуй, это инновация.
Респондент (думает, затем спрашивает): А еще я в прошлом месяце двух пьяниц уволил. Это инновация?
Интервьюер (думает, затем отвечает): Нет, это не инновация.
Респондент (думает, затем спрашивает): Я сказал, что заменил две ванны. Это одна инновация или две?
Интервьюер (думает, затем отвечает): По-видимому, одна.
Респондент: Ну, тогда пишите, что одна.
Интервьюер: Понятно. Переходим к следующему вопросу... ».
Интервью, проводимые по анкете, обычно выявляют несколько уровней ее недостатков. Таких уровней можно выделить, как минимум, три. Первый уровень – это возможная неадекватность анкеты всей изучаемой проблематике или самой изучаемой действительности. В этом случае требуется радикальная замена всей анкеты, а также рассмотрение вопроса о том, применим ли вообще метод анкетного опроса к данной (уточненной) проблематике. Пример, иллюстрирующий необходимость такой радикальной замены приведен в приложении к данному параграфу. Второй уровень – это состав вопросов и логическая композиция анкеты. В отечественных учебниках, рассматривая проблему композиции анкеты, много пишут о том, что порядок следования вопросов может сильно повлиять на результаты опроса. Это верно, но в данном случае речь идет о другом. Говоря об ошибках композиции, мы имеем в виду следующее.