Opportunities and restrictions of online surveys in the educational field.pdf За более чем 10-летнию историю онлайн-исследований в России (если вести отсчет от запуска проекта «Онлайн-монитор» компании МАСМИ [1]) накопился достаточно богатый опыт применения онлайн-технологий при опросах населения. Но несмотря на разнообразную палитру исследований, проводимых средствами онлайн-технологий, подобные опросы в сфере образования (в особенности среднего) встречаются крайне редко. Это в первую очередь касается опросов школьников, которых часто необходимо «ловить в сети». Так, по данным последних опросов до 93% подростков в возрасте 12–17 лет посещают Интернет ежедневно, при этом данный показатель не зависит от населенного пункта [2]. А в больших городах, где процент пользователей сети больше, чем по России в целом, средний возраст вхождения в Интернет составляет 9 лет [3. С. 46]. Современные подростки практически «живут» в сети, которая является для них комфортным (в определенной степени) и привычным пространством. Таким образом, релевантным данной возрастной группе было бы проведение онлайн опросов. Осенью 2012 г. коллективом Лаборатории мониторинговых исследований Московского городского психолого-педагогического университета был реализован своеобразный методический эксперимент по внедрению онлайн-технологий для опросов в сфере образования. Апробация онлайн-анкеты проводилась в рамках проведения мониторинга безопасности образовательной среды, целью которого являлось изучение мнений основных участников образовательного процесса касательно различных аспектов безопасности школьной среды. Исследование включало в себя анкетный опрос трех групп респондентов: учащихся 8-х и 10-х классов, их родителей и учителей. Решение о проведении опроса с применением онлайн-технологий было принято по ряду оснований. В первую очередь, это связано с процедурными особенностями проведения мониторинга как процесса регулярного сбора и анализа информации. Предполагается, что мониторинг будет охватывать все школы Москвы, которых согласно данным Департамента образования насчитывается более 1300[1]. Получение и обработка столь большого массива данных становятся возможными при обеспечении следующих условий: минимизация затраченных ресурсов, простота и воспроизводимость техники опроса при одновременном сохранении качества данных. Технология онлайн-опросов удовлетворяет этим критериям. Во-первых, при данном подходе существенно экономятся временные ресурсы: благодаря использованию специализированных программ формирование базы данных происходит автоматически, т.е. фактически ликвидируется этап ввода анкетных данных. Во-вторых, человеческие: дистанционное распространение анкет (точнее, ссылок на них) позволяет сократить затраты на полевой этап, в котором, как правило, на больших выборках задействовано значительное число анкетеров и интервьюеров. В-третьих, меньше затрачиваются материальные и финансовые ресурсы: тиражирование анкет как таковое влечет определенные затраты. Помимо этого онлайн-опросы позволяют снизить финансовые расходы на содержание штата анкетеров. Основным преимуществом онлайн-опросов по сравнению с бумажными является обеспечение качества данных, в частности повышение надежности и валидности. Технические возможности программирования онлайн-анкеты позволяют избежать преднамеренного или случайного пропуска вопроса респондентами по невнимательности. Помимо этого минимизировано влияние последовательности вопросов в анкете за счет того, что у респондента нет возможности посмотреть всю анкету целиком. Таким образом, в некоторой степени исключается сознательное искажение мнения с целью получения «правильных» ответов. Перечисленные преимущества приобретают особое значение при опросе подростковой аудитории, которой свойственно следовать ожиданиям и давать социально одобряемые ответы. Помимо этого онлайн-анкета эмоционально более привлекательна для подростка, нежели её бумажный эквивалент, напоминающий контрольную работу. При проведении исследования мы наблюдали большую вовлеченность в процесс заполнения анкеты при онлайн-опросе, нежели чем при офлайн-анкетировании. Во многом это связано с уже отмеченной особенностью «порционной» подачи вопросов в онлайн-анкете: интерес к заполнению подогревается тем, что, во-первых, респонденту неизвестна величина анкеты, во-вторых, неизвестно каким будет следующий вопрос. Отдельно стоит сказать о сопоставлении данных, собранных с помощью различных исследовательских процедур. Немногочисленные сравнительные исследования[2] опровергают гипотезу о том, что способ проведения опроса (онлайн или офлайн) влияет на результаты исследования. Исследователи отмечают, что форма опроса играет важную роль в тех случаях, когда в онлайн-варианте анкеты использованы интерактивные инструменты, облегчающие процесс заполнения или наглядно представляющие распределение ответов в вопросе (например, когда нужно распределить баллы или проставить определенные числовые значения) [4. С. 129]. Помимо этого в ряде сравнительных тестов фиксировалась большая наполняемость открытых вопросов в ходе онлайн-опроса по сравнению с уличным [5. С. 209]. Исследователи объясняют данные различия отсутствием временных ограничений при прохождении онлайн-опроса, а также отсутствием так называемого эффекта интервьюера – наличие смещений в ответах респондентов, вызванных личностью интервьюера [6. С. 204]. В нашем проекте мы также имели возможность сравнить данные, полученные в результате онлайн- и оффлайн-опросов. Несколько слов о самом мониторинге. Предмет мониторинга включал в себя различные параметры и показатели безопасности школьной образовательной среды, отобранные и утвержденные экспертами в ходе подготовки мониторинга. Через опрос учителей, родителей и учащихся измерялись следующие параметры и входящие в них показатели[3]: 1) приверженность учащихся здоровому образу жизни и употреблению психоактивных веществ; 2) проявление ксенофобии среди учащихся; 3) показатели, относящиеся к проявлениям физического и психологического насилия в отношении субъектов образовательной среды (учащихся, педагогов и т.д.); 4) показатели, относящиеся к аутоагрессивному (саморазрушающему) поведению среди учащихся; 5) показатели дисциплинарных нарушений, дезорганизующих образовательный процесс; 6) социально-психологические особенности учащихся, способствующие поддержанию ее безопасности; 7) психологическая комфортность образовательной среды для учащихся; 8) информационная безопасность образовательной среды.[4] На подготовительном этапе руководителям образовательных учреждений было предложено выбрать, в какой форме школа примет участие в анкетном опросе: в традиционной бумажной или электронной (через онлайн-опрос). Из 27 школ только четыре согласились принять участие в эксперименте с онлайн-опросом. Вероятно, такое распределение можно объяснить устоявшимся недоверием ко всему, что связано с электронными или, в частности, онлайн-технологиями. Следует также учитывать весьма деликатную тему безопасности, которая затрагивает болезненные для многих школ аспекты. В этой ситуации для многих руководителей становится оправданным (с их точки зрения) желание контролировать результаты опроса, которое трудно реализовывать при онлайн-опросе. Так как учителей и учащихся планировалось опрашивать непосредственно в компьютерных классах, потребовалось определенное время на согласование процедурной стороны опроса с администрацией школ. В итоге в исследовании приняли участие 64 учителя, 313 учащихся и 76 родителей. Процедурная сторона опроса состояла из четырех последовательных этапов: 1) формирование базы адресов респондентов; 2) отправка уникальных ссылок на анкету; 3) прохождение опроса респондентами; 4) формирование базы данных опроса, проверка и чистка массива. Практически на каждом этапе мы сталкивались с барьерами, препятствующими продолжению опроса, но находили пути решения. Так, изначально рассматривались различные возможности распространения ссылок на онлайн-анкеты, в том числе использование электронных дневников и электронных журналов, действующих в обследуемых школах. В дальнейшем стало понятно, что данные ресурсы в существующем виде не предназначены для проведения электронного опроса и не могли быть использованы в качестве информационного ресурса в полной мере. Тогда было принято решение применить традиционную для онлайн-исследований рассылку через электронные почтовые ящики. Здесь мы столкнулись с тем, что в обследованных образовательных учреждениях г. Москвы отсутствовали базы адресов электронных почт не только учащихся, но и педагогов и родителей. Лишь в одной школе у всех учителей существовала корпоративная электронная почта. В данной ситуации существенную помощь оказали представители школ (преимущественно заместители директоров по безопасности), собравшие адреса электронных почт участников исследования. Необходимо отметить, что сбор адресов электронных почт был совмещен с обязательной процедурой получения разрешения от родителей на участие детей в опросе: наименование электронного ящика в бланке означало согласие родителей. В одной из школ попытались решить проблему путем создания электронных почтовых ящиков для всех категорий опрашиваемых на базе локального школьного ресурса. В данном случае затруднения возникли на втором этапе – при отправке ссылок на анкету: в процессе опроса выяснилось, что высланные письма со ссылками были блокированы школьным сервером и никто из респондентов этой школы не смог ими воспользоваться. Напомним, что опрос педагогов и учащихся происходил в специально отведенной аудитории в школе, тогда как родители опрашивались дистанционно. Из-за других технических помех, таких как неправильное написание электронных адресов, блокирование входящих писем в настройках почтового ящика и др., на часть адресов, предоставленных школой, ссылки не доходили. При обнаружении данной проблемы, было принято решение генерировать дополнительные адреса, на которые высылались ссылки на анкеты для учащихся и учителей. В случае, если в ходе опроса обнаруживалось, что респондент не получил ссылку с анкетой на указанный им электронный адрес, ему предоставлялась возможность заполнить анкету, используя адрес, выданный ему сотрудником Лаборатории мониторинговых исследований. Подобные действия в отношении родителей произвести было невозможно, что могло стать причиной достаточно низких показателей участия родителей в мониторинге (табл. 1). Сравнение результатов офлайн- и онлайн-опросов в школах с сопоставимыми характеристиками (тип образовательного учреждения, показатели безопасности, количество учащихся) показало, что степень достижимости родителей существенно выше в случае с бумажным опросом (табл. 2). При этом для учащихся скорее характерна обратная зависимость, что скорее всего связано с тем, что младшее поколение ближе знакомо с новыми технологиями, чем поколение родителей. Таблица 1 Уровень достижимости респондентов при онлайн-опросе №№ Образовательное учреждение Количество потенциальных респондентов Количество заполненных анкет % 1 Школа 1 Родители 61 22 36 Учащиеся 66 60 91 Учителя 20 18 90 2 Школа 2 Родители 133 25 19 Учащиеся 150 146 97 Учителя 19 16 84 3 Школа 3 Родители 43 7 16 Учащиеся 59 49 83 Учителя 17 13 76 4 Школа 4 Родители 72 22 30 Учащиеся 63 58 92 Учителя 19 17 80 Таблица 2 Уровень достижимости респондентов при офлайн- опросе (бумажном) № Образовательное учреждение Количество потенциальных респондентов Количество заполненных анкет % 1. Школа 1’ Родители 31 23 74 Учащиеся 31 24 77 Учителя 20 20 100 2. Школа 2’ Родители 50 44 88 Учащиеся 50 42 84 Учителя 17 15 88 3. Школа 3’ Родители 22 17 77 Учащиеся 22 14 63 Учителя 18 15 83 4. Школа 4’ Родители 45 43 95 Учащиеся 45 41 91 Учителя 21 20 95 Вышеописанные технические и организационные помехи выступили первым существенным ограничением проведения онлайн-опроса в школах. На этапе прохождения опроса (3-й этап) проблемой стало медленное интернет-соединение в школах, не позволявшее респондентам комфортно заполнять анкету. Казалось бы, эта сугубо техническая сторона вопроса поправима и несущественна, но всё же стоит обратить на неё внимание в силу того, что управленческие структуры не решают поставленные задачи. Согласно плану национальной образовательной инициативы «Наша новая школа» к 2011 г. удельный вес численности обучающихся, которым обеспечена возможность пользоваться широкополосным Интернетом (не менее 2 Мб/с) должен был составлять 60%, фактический охват составил только 26%.[5] Отсутствие помощи и заинтересованности администрации школ также отрицательно сказалось на результатах проведения онлайн-опроса. Так, в одном образовательном учреждении учителя в массовом порядке отказались принимать участие в исследовании, ссылаясь на занятость и другие проблемы. Оказалось, что директор в должной мере не повлиял на ситуацию и не посчитал прохождение опроса важной и обязательной процедурой. Подводя итоги методологического эксперимента с онлайн-опросом в школах, можно констатировать, что в настоящее время онлайн-опрос школьников является оптимальным и перспективным способом получения мнения данной возрастной группы. Доказанная возможность проведения опроса в таком формате подкрепляется большей эмоциональной вовлеченностью и заинтересованностью в заполнении онлайн-анкеты со стороны учащихся. Ограничения проведения онлайн-опросов в школе связаны со следующими проблемами: 1) психологическая и квалификационная неготовность руководителей средних общеобразовательных учреждений к применению онлайн-технологий; 2) технические ограничения, связанные с отсутствием баз адресов электронных почт и невозможностью использования электронных дневников и журналов; 3) низкая скорость интернет-соединения. Данную проблему стоит рассматривать, так как данный вопрос находится вне компетенции школ. Необходимо отметить, что вышеотмеченные проблемы скорее относятся в разряду организационно-технических, нежели методологических ограничений проведения опросов онлайн. Таким образом, мы допускаем, что при изменении ситуации в лучшую сторону (что вполне вероятно при условии реализации инициативы «Наша новая школа» и «Концепции информатизации образовательного процесса в системе Департамента образования города Москвы»[6]) в школах можно будет беспрепятственно проводить онлайн-опросы.

Скачать электронную версию публикации