Аверьянов Л.Я. Социология. Искусство задавать вопросы.

Что можно получить из пилотажного опроса?
1. Какова наполняемость альтернатив. Как правило, из всего набора альтернатив, особенно в вопросах, которые имеют ограниченный выбор, работают не более 2-4 альтернатив, причем, чем больше вариантов ответов предлагается в вопросе, тем меньше их наполняемость. В результате некоторые альтернативы могут оказаться "пустыми", т.е. ни один респондент их не выбрал или какую-то часть альтернатив выбрало очень ограниченное количество опрошенных. В исследовании может быть интересен сам момент выбора или не выбора большинством респондентов тех или иных предлагаемых альтернатив. Однако необходимо помнить, что малое наполнение альтернатив значительно ограничивает возможности их анализа.
Пилотажный опрос должен показать, является ли небольшое напол-нение альтернатив результатом их неправильного подбора или же следстви-ем разброса ответа респондентами по значимым альтернативам и выбора приоритетных.
Большое значение также имеет количество ответов в совокупности по всем альтернативам анкеты. Если суммировать все ответы опрошенных по каждой порядковой альтернативе всех вопросов и вывести среднюю величину, то можно увидеть, что не все альтернативы в порядке их расположения набирают одинаковое количество голосов. Об этом уже говорилось ранее. Такое положение возникает, если альтернативы в вопросе расположены неправильно, скажем, когда на первое место ставят наиболее значимую альтернативу, ту, которую наверняка выберут большинство респондентов, или когда было предложено довольно большое количество вариантов ответов.
В результате получается, что часть альтернатив в порядке их распо-ложения набирает больше голосов (чаще это бывает первая альтернатива), а некоторые меньше (чаще всего те, которые находятся в середине). В этом случае надо еще раз пересмотреть расположение альтернатив в вопросах, внести, если это необходимо, поправки, стремясь к тому, чтобы распределе-ние ответов респондентов по порядковым альтернативам было более или менее равномерным. Следует помнить, что такое неравномерное распреде-ление в конечном итоге дает неверную информацию.
2. Сколько респондентов не ответило на тот или иной вопрос. Да-леко не все респонденты отвечают на все вопросы. Как правило, отказов от ответа в зависимости от чистоты опроса и сложности анкеты бывает в сред-нем в пределах 3-5%. В целом считается нормальным, если количество отка-зов не превышает 6%, а по некоторым оценкам - 14%. Но на один вопрос отказов бывает меньше, чем на другой. Иногда процент отказов от ответов достигает 50% и выше. В пилотажном опросе анализируются не только пря-мые отказы, так называемые чистые вопросы, но и ответы респондентов на альтернативы: "Не знаю", "Не думал об этом", "Затрудняюсь ответить", "Не помню" и т.д. В пилотажном исследовании следует выяснить, почему часть респондентов отказалась отвечать на данный вопрос. Этому может быть не-сколько причин:
а) респондент не понял вопрос и, чтобы к нему "не приставали", вы-бирает нейтральную альтернативу или вообще не отвечает на вопрос. (Необходимо в этом случае переформулировать вопрос и снова проверить);
б) респондент устал отвечать и, чтобы не утруждать себя, пропустил вопрос или выбрал последнюю альтернативу: "Не знаю", "Затрудняюсь ответить" и т.д. (необходимо поставить вопрос в другое место анкеты и проверить, как он будет работать там);
в) респондент имеет свое мнение по данной проблеме, но оно оказа-лось не предусмотренным социологом в наборе альтернатив, а дописать не-где, места не оставлено, вопрос закрытый. Поэтому, чтобы не кривить ду-шой и не давать ответ, не соответствующий его мнению, он выбирает нейтральную альтернативу или не отвечает на вопрос вовсе. (Дать полуза-крытый вопрос);
г) вопрос настолько неожиданный и находится вне поля зрения ре-спондента, что он не знает, как отвечать, поскольку не думал о нем. (Прове-рить степень компетентности и информированности респондентов другим вопросом);
д) вопрос труден для ответа, например, табличный, шкалированный, с большим набором альтернатив, он утомляет, требует большого внимания и напряжения. Обычно на такие вопросы бывает больше всего отказов. (Об-легчить форму вопроса, перестроить его, ввести дополнительные вопросы, перевести табличные, комбинированные вопросы в обычные);
е) респондент и в самом деле не помнить, поэтому и пишет "Не пом-ню", "Затрудняюсь ответить", "Не знаю". Возможно, вопрос не был подго-товлен другими вопросами для оживления воспоминания. (Добавить вопро-сы для оживления памяти или перестроить вопрос).
Отказ от ответа на содержательный вопрос может выражать отноше-ние респондента к отдельным вопросам и к анкете в целом. Например, ре-спонденту не нравится анкета или отдельные ее вопросы, он не стремится понять их, отвечать добросовестно и полно. Количество отказов от ответа является показателем степени незаинтересованности опрашиваемых в рабо-те с анкетой.
Тщательный анализ результатов пилотажного опроса позволяет вы-явить истинные причины незаинтересованности в работе над анкетой или над отдельными вопросами. Этот анализ бывает иногда весьма сложным, поскольку вариантов поведения респондента при ответе на тот или иной вопрос может быть много. В частности, можно использовать метод перекрестного анализа пограничными вопросами или вопросами одного блока. Это позволяет определить логику рассуждения респондента. Отказываясь отвечать на тот или иной вопрос, респондент прерывает логику рассуждения и тем самым нарушает всю систему рассуждения (если, конечно, вопрос не предусматривал вариант неответа части респондентов). Это не всегда раскрывает истинные причины, по которым респондент отказался отвечать, но позволяет привлечь внимание исследователя к тому, что в данном вопросе или блоке вопросов не все в порядке и что его надо перестроить.
3. Как распределяются ответы респондентов в целом по анкете. Обычно количество ответов или отказов от ответа варьируется в зависимо-сти от участка анкеты. Под участком в данном случае понимается группа вопросов одного блока или просто расположенных в одной последовательности. Как уже отмечалось, к концу анкеты респондент начинает уставать, и соответственно снижается общее количество ответов и увеличивается общее количество отказов от ответа.
Как видно из рис. 1, количество отказов от ответа, постепенно увели-чивается и примерно к середине анкеты, достигает своего пика. По всей ви-димости, респондент теряет интерес к анкете, внимание его снижается, и соответственно снижается его активность. Но затем его внимание и актив-ность несколько повышаются, количество отказов от ответа сокращается. К концу анкеты, когда добирается до легких вопросов, внимание его повыша-ется и количество отказов от ответа снижается.
Вот один из графиков отказов от ответа на вопросы

Наибольшее количество
отказов










Начало анкеты Середина анкеты Конец анкеты
Рис. 1

Это только один пример распределения отказов от ответа. Характер распределения отказов от ответа может принимать различный вид в зависи-мости от типа анкеты, сложности вопросов и от характера исследования в целом. Иногда в целях решения каких-то специфических задач исследования в анкете приходится использовать сложные вопросы или располагать их соответствующим образом, заранее зная, что это может вызвать относительно большое количество отказов от ответов на них. Но здесь уже приходится выбирать чем жертвовать. Поэтому кривая распределения не ответов респондентов по полю анкеты может быть различной. В одних случаях она устойчиво повышается, что может свидетельствовать о снижении интереса опрашиваемых к вопросам анкеты; в других - постоянно понижаться, что может означать повышение интереса респондентов к анкете; в третьих случаях она стабильна, не изменяется на протяжении всей анкеты, что свидетельствует о том, что внимание, интерес и активность респондентов на протяжении всей анкеты не меняются.
Но, независимо от того, что показывает общая кривая, распределение внимания и активности опрашиваемых может меняться на отдельных участ-ках анкеты. В одних случаях они могут резко падать и так же резко возрас-тать в других случаях. Это естественно, поскольку одни вопросы респондентам нравятся больше, другие - меньше, внимание и активность опрашиваемых никогда не бывают постоянными, в каких-то определенных пределах они всегда колеблются.
Имея кривую распределения внимания респондентов, получаемую в результате пилотажного опроса, можно соответствующим образом, исполь-зуя специфические методы, управлять вниманием и активностью респондентов, перестраивать анкету с целью повышения заинтересованности, внимания респондентов, активизации их деятельности.