Методически ошибочно включать в анкету вопросы
Методически ошибочно включать в анкету ______ вопросы. Социальная группа, которая подвергается дискриминации со стороны доминирующей. Виды опросов и понятие выборки.
Метод оценки уверенности в ответе позволяет выявить трудности, связанные с формулированием ответа. Респондента просят оценить (например, по пятибалльной шкале) каждый ответ в зависимости от уверенности, с которой он был выбран. С помощью метода артикулированного суждения можно установить, что говорит респондент о причинах выбора определенного варианта ответа. Для этого его либо просят проговаривать все мысли, которые приходят ему в голову при ответе на вопрос, либо ответить на дополнительные вопросы типа «почему» 10.
Рогозиным" четырехшаговая схема анализа когнитивного перехода (рис.
Кие ресурсы (знания и речевые навыки), которые использует респондент при ответе на анкетный вопрос. Различная когнитивная компетентность, которой обладают разные люди, заставляет их по-разному отвечать на прозвучавший вопрос. Но не только она влияет на качество получаемой информации. Не меньшее значение имеют экстралингвистические факторы, в том числе молчание, кивки, ухмылка, движения руками, покачивание головой интервьюера. Трансформация исследовательских концептов в систему референтов.
Адекватность целей исследования полученным переменным. Семантическая компетентность интервьюера, влияние респондента и методического аппарата исследования. Процесс коммуникации, определяемый когнитивными картами интервьюера и респондента; распознавание и смещение значений. Когнитивные процессы у респондента: понимание, поиск информации, суждение, формулирование ответа. На первом шаге респондент интерпретирует вопрос, встраивая его в привычные для себя семантические рамки. На втором — вспоминает соответствующие ответу события, действия или высказывания.
При этом респондент может обращаться к эпизодам, связанным с его собственным опытом, или ссылаться на мнения или действия других людей. На третьем шаге осуществляется интеграция вспомнившихся событий, их сопоставление между собой и установление некоторой логической структуры изложения. Как правило, в обыденной жизни респондент не задумывается над вопросами, которые интересуют исследователя, поэтому на третьем шаге он вынужден формировать собственное суждение, исходя из мобилизованных к данному моменту ресурсов.
Тается артикулировать самостоятельно выработанное суждение, используя собственный семантический словарь и навыки построения связной речи 12. Для проверки предложенной схемы в рабочих условиях Д. Цель исследования — определение характера смещений в формулировке вопроса на каждом трансформационном переходе (интерпретативном, операциональном, коммуникативном и когнитивном). Тестировался опросный инструмент для изучения политических установок, содержащий четыре типа вопросов: закрытые вопросы с порядковой шкалой, псевдооткрытые вопросы с номинальной шкалой, открытые вопросы, альтернативные вопросы с порядковой шкалой 13.
В лабораторных условиях было проведено 42 стандартизованных интервью. Состав экспериментальной группы был выровнен по полу и образованию.
В выборку попали люди в возрасте от 23 до 64 лет. Экспертным методом оценивалась речевая компетентность (грамотное построение предложений, логическая завершенность фраз, корректное использование понятий) каждо-го респондента: 42,9% респондентов были отнесены к классу с высокой речевой компетентностью, 45,2% — с низкой, в 11,9% случаев речевая компетентность не установлена. Опрос проводили подготовленные интервьюеры с примерно одинаковым уровнем квалификации в течение 5 дней.
Средняя длительность интервью составила 10 минут. Для регистрации поведения интервьюеров и респондентов использовалось аудио- и видеозаписывающее оборудование. С помощью факторного анализа была проведена группировка переменных, описывающих изменение текста анкетного вопроса. В результате были выделены два фактора, которые объяснили 63,4% разброса признаков. Вербальное поведение интервьюера при коммуникативном переходе описывается Д. Рогозиным пятью переменными: стимулирование, повторение, уточнение, прерывание и поддержка ответа.
Рассматривая эту группу переменных, он выделил два латентных признака, характеризующих стратегии проведения опроса, которые использует интервьюер: давление на респондента и поддержка респондента (см. Первая компонента показала сильную взаимосвязь таких переменных, как перестановка слов в вопросе, добавление незначимых слов, пропуск и замена слов. Как было установлено, прерывание вопроса свидетельствует о том, что респондент еще до завершения вопроса сформулировал суждение, которое может быть ответом, а может представлять собой и уточняющий вопрос.
15 Закрытые и открытые вопросы
Респондент как бы показывает, что для него вопрос абсолютно понятен и не требует дальнейшего развертывания. Повторение респондентом отдельных смысловых единиц вопроса позволяет интервьюеру скорректировать вопрос и внести в него необходимые уточнения. Задавая второй или третий раз видоизмененный вопрос, интервьюер будет надеяться получить более адекватный ответ. Подобная стратегия неотвратимо приводит к увеличению совокупного текста ответа. Ние артикулированного текста ответа будет приводить к снижению его адекватности семантическому заданию вопроса (рис.
Повторение респондентом вопроса является отправной точкой для обсуждения самого вопроса, внесения в него необходимых уточнений и как следствие отклонения от семантического задания вопроса и производства фалыпответа. Так, наибольшая доля повторений встречается в тех случаях, когда респондент испытывает колебания, изменяет ответ или затрудняется выбрать из предложенных альтернатив. Повторение отдельных семантических единиц вопроса приводит к созданию другой версии вопроса. Переменная «уточнение вопроса» не имеет статистически значимой связи с образованием и речевой компетентностью респондентов.
Это позволяет предположить, что основной причиной уточнения вопроса являются затруднения с его формулировкой и способом представления.
Переспрашивание вопроса свидетельствует о том, что респондент не смог преодолеть первый шаг когнитивного перехода. Он не стал создавать фальшвопрос, а решил обратиться за поддержкой к интервьюеру. Это может потребовать от интервьюера либо повторения вопроса, либо его уточнения. Если при возникновении вопроса у респондента интервьюер начинает уточнять анкетный вопрос, пытается прокомментировать отдельные понятия, он невольно преобразует стандартизированное интервью в беседу, которая отличается от обычного разговора лишь заданным извне фокусом.
Кабинетный вариант» анкеты всегда нуждается в контрольной проверке на соответствие его методическим критериям самыми разными способами.
Проекты по теме:
Часть вопросов доступна логическому контролю на уровне экспертных оценок, а другие вопросы требуют эмпирической, экспериментальной проверки в специализированном пробном исследовании. Как правило, логический анализ и пробное исследование образуют две последовательные процедуры. Их цель — оценить качество разработанной методики опроса.
15 Закрытые и открытые вопросы
Логический контроль анкеты, позволяющий проверить ее на соответствие научным критериям качества, проводится в самом конце — по окончании компоновки анкеты. Логический контроль — это соотнесение каждого вопроса анкеты, ее композиции и организационных решений по проведению опроса со списком нормативных требований. Он проводится либо самим автором, либо членами специальной экспертной комиссии (совета). Правильно организованный логический контроль строится по двум осям декартовой системы координат (рис.
15 Закрытые и открытые вопросы
Ось ОХ можно назвать параметром «часть-целое». Она представляет собой контроль правильности формулировки вопросов и правильность компоновки всей анкеты, ее композиции. Ось ОУможно назвать параметром «логическое-психологическое». Она представляет собой контроль соответствия каждого вопроса логическим и психологическим критериями.
Еще по теме 15 Закрытые и открытые вопросы:
Не является ли вопрос «острым» для респондентов, связанным с социальным или психологическим «табу»? Не задевает ли он самолюбие респондента, интимные стороны его жизни? Соответствует ли смысл вопроса и его содержание компетентности и информированности опрашиваемых, уровню их обыденных представлений, житейской практики? Является ли вопрос достаточным для получения необхо-димой информации? Не нужно ли добавить контрольные вопро-сы на искренность и логическую непротиворечивость?
Перечень такого рода вопросов — своеобразный методический «тест», обеспечивающий контроль качества каждого воп-роса. Первый вариант: в тексте анкеты рядом с каждым вопросом записываются номе-ра тех критериев (или их сокращенные обозначения), по которым данный вопрос получил замечание. Второй вариант: рядом с каждым критерием выписываются номера вопросов, получивших замечания по данному критерию. Результатом такого анализа будет комплексная оценка каждого вопроса по всем названным критериям.
Вся совокупность вопросов раз-делится на три группы в зависимости от возможности их до-работки. Первая группа — вопросы, признанные пригодными для использования в опросе без дальнейшей проверки и дора-ботки. К ним относятся не получившие замечаний и те воп-росы, где замечания доступны редактуре без эксперименталь-ной проверки. Вторая группа — вопросы, либо получившие небольшое количество замечаний, либо имеющие грубые ло-гические и методические просчеты и признанные непригод-ными к использованию.
15 Закрытые и открытые вопросы
Третья группа — вопросы, нуждающиеся в экспериментальной или зондажной проверке в пробном исследовании. По поводу каж-дого (или большинства) из них необходимо знать, какие их методические характеристики будут проверяться в пробном исследовании. В зависимости от этого ставятся конкретные задачи и процедуры для пробного исследования. Приведем здесь несколько таких ситуаций. Существует опасение, что некоторые слова непонятны. В пробном исследовании проводится тестирование pecпондентов по списку этих слов.
Если потенциально непонятных слов мало, то их содержание проверяется дополнительными вопросами в ус-тной форме во время пробного исследования. Кроме того, по-нимание языка анкеты контролируется также методом наблюде-ния во время пробного опроса, когда анкетер фиксирует все слу-чаи непонимания прямо в анкете вместе с вопросами. Проверяется соответствие вариантов ответов в закрытом вопросе языку и системе представлений опрашиваемых, уровню их информированности.
В пробном исследовании «подозреваемые» вопросы задаются в открытой форме, а затем полученные ответы сравниваются с «кабинетными» вариантами и производится доработка. При этом проверку нельзя заменить использованием «полузакрытой» формы вопроса. Среди социологов распространено мнение, что «кабинетный» вариант вопросов не нуждается в апробации, если к нему добавить вариант «другое мнение». Неявно предполагается, что все недостающие варианты допишет респондент.
Однако практика показывает, что дополнений бывает очень мало. Респонденты подбирают варианты из предложенного списка даже в тех случаях, когда последний не соответствует их личному мнению. Существует сомнение по поводу формы вопроса: ставить ли его в открытой или закрытой форме, какую выбрать шкалу (трех-, пяти-, семичленную), сделать ли вопрос в виде теста на незавершенное предложение либо в виде картотеки? В таком случае, после логического обоснования формы вопроса, надо провести экспериментальную проверку отобранных вариантов, сравнить результаты и выбрать наиболее пригодный.
Возникли сомнения в однозначности восприятия смысла вопроса. Здесь надо заранее продумать, какой (какие) дополнительный вопрос следует задать респонденту, чтобы проверить понимание смысла вопроса и ответа. Обычно достаточно попросить респондента прокомментировать или пояснить свой ответ. Результатом логического контроля анкеты выступает совокупная оценка ее качества, характеризуемая числом полученных замечаний. Те вопросы анкеты, которые содержат очевидные методические просчеты, заменяются другими, имеющими методическое решение.
Весь описанный процесс предваряет разработку задач пилотажного исследования. Окончательный вердикт качеству всей анкеты выносит пилотажное (пробное) исследование.
Оно вскрывает все недочеты анкеты и особенно в составлении вопросов. Один из верных показателей непригодности вопроса — большая доля не ответивших или затруднившихся ответить на него. Значение данного показателя интерпретируется в зависимости от познавательной задачи вопроса. Если изучается распространенное явление, о котором Должны знать все или подавляющее большинство людей, а доля затруднившихся ответить высока, то это свидетельство методической погрешности в составлении вопроса.
Доля не ответивших или затруднившихся ответить высока, то вполне можно заключить, что вопрос соответствует поставленной задаче. Логические требования к разработке вопросов дополняются комплексом требований социально-психологического характера, которые учитывают такие особенности опрашиваемых, как их информированность, специфика жизненной ситуации, память, навыки самоанализа, умение устно и письменно характеризовать свои мысли, чувства, отношение к опросу и желание сообщить необходимую социологу информацию 16. Следует отметить, что логические и социально-психологические ошибки чаще всего сопутствуют друг другу.
Например, ошибки, связанные с превышением информированности респондентов о предмете опроса, как правило, встречаются в вопросах, где нечетко определена познавательная задача. В них, кроме того, встречаются и научно-теоретические понятия, которые нуждаются в эмпирической интерпретации, вследствие чего нарушается требование соответствия языку опрашиваемых.