падтрымаць нас

Артыкулы

На что стоит обращать внимание в презентациях социологических исследований

На что стоит обращать внимание в презентациях социологических исследований

Отталкиваясь от конкретного кейса, в этой статье Геннадий Коршунов обозначает ряд позиций, которые, с его точки зрения, желательны в описании каждого социологического исследования.

Гэты артыкул выходзіць у межах рассылкі “Што думаюць беларусы”. Падпісвайцеся.

Начать хочу со слов благодарности госпоже Новиковой за поддержку моего предложения по активизации экспертных дискуссий среди беларусских исследователей. Именно в таком ключе я рассматриваю публикацию Марины Новиковой под названием «Дискуссия без оппонента», где уважаемая авторка пытается рефлексировать над моим комментарием для Зеркала по поводу презентации результатов исследования Беларусской аналитической мастерской (далее – БАМ) на Конгрессе исследователей Беларуси в Каунасе.

Прежде чем прояснить свою позицию, я хотел бы указать как минимум на один момент, который неверно описывает ситуацию в указанной статье. В тексте указано, что, цитирую: «Белорусское исследование проводилось методом телефонного интервью (CATI), что сегодня в Беларуси делает только БАМ (выделение мое)». Это утверждение не соответствует действительности. И в 2020 г., и в 2021 г., и в 2022 г. так телефонные опросы (называемые «телефонники») по Беларуси проводили и, по моей информации, будут проводить еще несколько организаций.

Теперь можно вернуться к возможности и предмету дискуссии. Главным вопросом здесь будет, как мне кажется, вопрос о методике исследования и о ее описании. Это важнейшие элемент любого проекта, от которых зависит степень доверия и каждому конкретному исследованию в частности, и – в пределе – социологическим исследованиям вообще. В этой связи у меня и появилось несколько вопросов к презентации исследования БАМ.

Я совершенно согласен с госпожой Новиковой в том, что можно (и нужно!) было бы задавать вопросы непосредственно на панели. И мне очень жаль, что тогда не получились сделать именно так, потому что, действительно, выступление по беларусскому исследованию было почему-то последним на Конгрессе исследователей Беларуси. Задать все возникшие вопросы тогда действительно не получалось просто по факту ограниченности времени, а позже все разошлись по своим панелям и круглым столам.

Вместе с тем один из своих вопросов я озвучил на презентации – относительно сроков проведения исследования. К сожалению, ни на панели, ни в тексте от БАМ внятного ответа не прозвучало. Слова о том, что исследование проводилось в сентябре «до мобилизации», сложно признать исчерпывающим ответом. Потому что в сентябре была не только «мобилизация». Было еще как минимум и мощное контрнаступление ВС Украины в Харьковской области. И попадают ли сроки исследования на это контрнаступление, было ли исследование до него или после – непонятно.

Между тем, информация о событиях в Харьковской области, как мне представляется, могла повлиять на ответы респондентов на некоторые вопросы, особенно на те, в которых есть слово «сочувствие». Отмечу, что обычно, дабы избежать любого недопонимания, исследователи просто указывают даты начала и окончания исследования.

Второй вопрос касается дизайна выборки. Здесь имеется в виду вот какой момент – в качестве метода сбора информации прописан телефонный опрос (CATI). Однако не указано, по каким – мобильным или стационарным – телефонам делались звонки. Если звонили и по тем, и по другим, то не указана ни пропорция мобильных и стационарных номеров в выборке, ни способ комбинирования этих подвыборок. Между тем, и то, и другое – это большие методические вопросы. Я понимаю, что это может быть довольно скучно, однако такого рода информация важна для понимания качества первичной социологической информации.

Третий вопрос – очень интересует Response rate (то есть объем доли респондентов, которые в результате дозвона согласились принять участие в исследовании и прошли его полностью закончили) и самого исследования, и его динамика относительно предыдущих замеров. Есть более или менее традиционное понимание стандарта в этой области, который плюс-минус укладывается в интервал 6-8%. Этот стандарт в разных странах разный, но он работает во всех сферах – от маркетинга до электоральных исследований и его нужно знать.

Поэтому понимания ситуации в стране, для уточнения степени влияния на ответы так называемого «фактора страха» было бы очень полезно понимать, как сейчас люди реагируют на предложение поучаствовать в телефонном опросе.

И последний вопрос, из профессионального интереса – перевзвешивалась ли выборка перед анализом данных? и если эта процедура производилась, то по каким критериям? Я поясню: в ответе на этот вопрос скрывается степень релевантности переноса данных исследования на все общество. Перевзвешивание выборки помогает исправить, несоответствие достигнутой выборки генеральной совокупности по тем или иным параметрам. Традиционно перевзвешивание (если осуществляется, то) делается по полу, возрасту и образованию. Дополнительными критериями может быть регион проживания, размер населенного пункта и проч.

Вот на какие вопросы по тому исследованию я хотел бы увидеть ответы. Но, к сожалению, ни в этой презентации, ни в предыдущих презентациях БАМ, которых в открытом доступе практически не найти, ответов на эти вопросы я так и не отыскал.

Фото: Павел Кричко