Телефоны в коробку — оценки вверх? Большой эксперимент проверил запрет на смартфоны в аудиториях
Смартфон на парте — не обязательно портал в бездну, но и учебным пособием он обычно не притворяется. Масштабный эксперимент в индийских колледжах показал: если на время лекции убирать телефоны в деревянные ящики, оценки немного растут. Больше всего выигрывают первокурсники и студенты, которые начинали семестр с результатами ниже среднего. Чудес, впрочем, не случилось: эффект оказался умеренным, а на посещаемость и большинство показателей благополучия запрет почти не повлиял.
Исследование опубликовано в журнале Science. Его авторы — Alp Sungu, доцент Wharton School Пенсильванского университета, Andreas Bjerre-Nielsen, доцент Копенгагенского университета, и Pradeep Kumar Choudhury из Университета Джавахарлала Неру в Нью-Дели.
Эксперимент: смартфоны сдали, лекции продолжились
Запрет на телефоны в аудиториях означает, что во время занятий студенты не держат устройства под рукой: их просят убрать или сдать. Такие правила всё чаще вводят в школах разных стран — ради снижения отвлекающих факторов, цифровой зависимости и травли в интернете. По данным американского отчёта о политике в образовании за 2023 год, ограничения на телефоны в той или иной форме ввели примерно две трети штатов США, а остальные рассматривали похожие меры. По оценке авторов исследования, ограничения действуют примерно в половине школ мира.
Политика распространяется быстро, а строгих экспериментов, которые показывали бы её последствия, до сих пор было мало. Наблюдательные исследования и анализы уже принятых правил давали смешанные результаты: где-то отмечали улучшение оценок или самочувствия у учеников, которым учёба давалась сложнее, а где-то не находили заметных изменений. Исследования ноутбуков, в свою очередь, указывали, что свободный доступ к устройствам может мешать усвоению материала.
Даже сам факт, что смартфон лежит рядом, не всегда ухудшает результаты: метаанализ лабораторных экспериментов не обнаружил статистически значимого влияния просто видимого, но не используемого телефона на когнитивные способности. А исследование школьных правил в реальных условиях не выявило заметного улучшения психического благополучия или качества жизни после запрета, хотя сотрудникам школ стало немного меньше хлопот с телефонами.
«Запреты на телефоны — одна из самых быстро распространяющихся образовательных мер, но причинно-следственных данных о её результатах не хватало», — объяснили авторы. Иными словами, правила вводили охотно, а проверяли их последствия куда менее энергично.
Чтобы восполнить пробел, учёные провели рандомизированное контролируемое исследование в штате Одиша на востоке Индии. В регионе живёт более 40 миллионов человек, а смартфонами владеют свыше 70% молодых людей в возрасте от 15 до 29 лет. Для колледжных кампусов телефон здесь не экзотика, а привычный спутник.
Эксперимент прошёл в весеннем семестре 2024 года, с февраля по май. В нём участвовали 16 683 студента, 742 преподавателя и 2 305 учебных курсов в десяти вузах. Средний возраст студентов — 19,4 года; участникам было от 16 до 22 лет. Женщины составляли 35,5% выборки. План исследования зарегистрировали заранее, а данные для его воспроизведения выложили в открытый доступ.
Исследователи заказали около тысячи деревянных ящиков для телефонов и установили их во всех аудиториях десяти вузов. Поскольку помещения использовали разные группы, ящики были повсюду. Различие между группами состояло не в наличии ящика, а в том, требовали ли преподаватели им пользоваться.
Учёные распределяли не отдельных студентов, а подразделения «факультет или кафедра — курс обучения». Из 420 таких групп 198 попали в условие запрета, остальные составили контрольную группу. Поэтому участники экспериментальной группы сталкивались с одним и тем же правилом почти на всех занятиях в течение семестра.
В аудиториях с запретом студентам предписывали класть телефоны в ящик в начале каждой лекции. Исключения допускались при подтверждённой чрезвычайной ситуации или необходимости ухаживать за близким. Контрольная группа пользовалась телефонами как обычно. За ходом эксперимента в каждом вузе следил штатный ассистент исследователей вместе с назначенным координатором из числа преподавателей.
Оценки подросли — но не до небес
Результаты собирали из трёх источников. Исследователи получили официальные данные о посещаемости и средний балл за семестр — GPA, то есть обобщённую оценку успеваемости. Их сравнивали с показателями до эксперимента. Основную часть итоговых оценок составляли экзамены, составленные внешними специалистами и проверенные вслепую, без доступа проверяющих к данным о студенте.
Кроме того, 2 557 студентов дважды за семестр отвечали на вопросы об отношении к запрету, самочувствии и цифровых привычках. Ассистенты также проводили случайные наблюдения: ненадолго заглядывали в аудитории через окна или дверные проёмы, не прерывая занятия. Наука иногда выглядит именно так — деревянный ящик и человек у двери, который старается не выглядеть подозрительно.
После учёта оценок за предыдущий семестр студенты из аудиторий без телефонов в среднем получили более высокие итоговые GPA, чем участники контрольной группы. Разница составила 0,073 стандартного отклонения. Эта статистическая мера показывает, насколько сдвинулись результаты относительно обычного разброса оценок.
Цифра не означает, что каждый студент прибавил одинаковое количество баллов. Чтобы оценить масштаб, авторы сравнили результат с другими образовательными мерами. Медианный эффект в целом по рандомизированным исследованиям образования составляет около 0,10 стандартного отклонения, а в крупных экспериментах — примерно 0, Изменения учебных программ и программы подготовки учителей обычно дают эффект от 0,05 до 0,20; разница между средним и очень хорошим учителем оценивается примерно в 0,
Итак, запрет дал результат ниже медианного для образовательных экспериментов, но выше типичного эффекта крупных исследований. Это заметное улучшение, однако не революция, которая одним ящиком отменяет все проблемы образования. Авторы называют меру потенциально недорогой и особенно полезной для тех, кому поддержка нужнее всего, но предостерегают от представления о ней как о «серебряной пуле».
Выигрыш распределился неравномерно. Он был сосредоточен среди студентов с оценками ниже медианы в начале семестра и среди первокурсников. Небольшой эффект также обнаружили у учащихся не по направлениям STEM — естественным наукам, технологиям, инженерии и математике. У студентов с оценками выше медианы, магистрантов и аспирантов, а также учащихся STEM-направлений различия между группами были близки к нулю и статистически значимыми не стали.
Авторы проверили и распределение оценок. В обеих группах разброс результатов за семестр увеличился, но в аудиториях без телефонов — менее резко. Оценки также стали меньше скучиваться вокруг узкого набора значений. Это описывает концентрацию оценок, а не служит самостоятельным доказательством снижения неравенства. Если сравнивать студентов по месту в распределении результатов, учащиеся из группы запрета чаще показывали более высокие оценки на большей части шкалы, причём заметнее всего преимущество было у тех, кто учился слабее.
Посещать занятия чаще студенты не стали: анализ общих и покурсовых данных не выявил устойчивого влияния запрета на посещаемость. Значит, рост оценок, вероятно, связан не с внезапной любовью к расписанию, а с тем, что происходило внутри аудитории.
Результат согласуется с более ранним экспериментом, похожим на учебное занятие. В нём хуже справлялись с тестом на понимание студенты, которые держали телефон при себе, тревожились из-за невозможности им воспользоваться или отвлекались на сообщения. Самое сильное ухудшение проявлялось через 10–15 минут после начала занятия. Но тот эксперимент проверял кратковременное запоминание после имитации лекции, а не результаты экзаменов за семестр в реальных вузах. Данные дополняют друг друга, но это не одно и то же исследование.
Запрет понравился даже тем, кто сначала мог бы возмутиться
Опросы показали неожиданный для авторов сдвиг: к концу семестра студенты, учившиеся без телефонов, чаще поддерживали ограничения и считали их полезными, чем участники контрольной группы. Им предлагали выбрать один из пяти вариантов: запрет на весь день, запрет только на лекциях, зоны, где телефоны разрешены, ограничения приложений или отсутствие правил. Студенты из группы запрета реже выбирали вариант «никаких ограничений», а предпочтения заметнее всего смещались в сторону запрета на весь день.
Поддержка правила и вера в его пользу были выражены сильнее у девушек и у более вовлечённых студентов, которые обычно сидят ближе к преподавателю. Здесь есть занятный парадокс: в оценках больше всего выиграли слабее успевавшие, а сильнее поддерживали запрет более мотивированные студенты. По предположению авторов, именно им спокойная и сосредоточенная аудитория могла быть особенно заметна.
При этом по большинству других показателей статистически значимых различий между группами не обнаружили. Запрет не изменил заметным образом субъективное ощущение отвлечения, восприятие собственного обучения, благополучие, учебную мотивацию, общее время использования телефона, частоту его появления в кампусе или онлайн-травлю.
Были и небольшие сдвиги. Студенты из группы запрета чуть чаще испытывали страх что-то упустить — знакомое многим чувство, будто без экрана в мире непременно происходит что-то важное. Во время лекций они немного реже пользовались другими электронными устройствами. Среди мужчин в группе запрета отмечались небольшие увеличения страха упустить новости, общего экранного времени и субъективного ощущения отвлечения по сравнению с мужчинами из контрольной группы.
Наблюдения из дверных проёмов показали, что в аудиториях без телефонов студенты реже вели себя шумно и меньше отвлекались на разговоры не по теме. Преподаватели, судя по наблюдениям, активнее работали с учебными материалами и чаще поддерживали внимание группы. Это не означает, что в классах творился хаос: дополнительная активность могла быть просто частью контроля за соблюдением правила. При этом даже преподаватели, которым запрет формально не адресовался, реже пользовались собственными телефонами во время занятий.
«Мы ожидали, что студенты будут недовольны. Рост поддержки правила стал для нас сюрпризом», — отметили исследователи. Они также обратили внимание, что преподаватели стали реже заглядывать в телефоны и, по наблюдениям, больше включались в лекции.
Однако был и странный результат: внешние наблюдатели оценивали студентов в аудиториях без телефонов как более отвлечённых, чем студентов в контрольной группе. Авторы предполагают, что телефон — это тихий источник отвлечения, который легко не заметить. Когда его убирают, внимание может переключиться на окружающий шум и происходящее вокруг — а это уже проще увидеть человеку, заглянувшему в окно.
Что исследование не доказывает
Авторы предлагают два возможных объяснения роста оценок. Во-первых, без телефона рабочая память — способность удерживать и обрабатывать информацию прямо сейчас — может быть свободнее для лекционного материала. Во-вторых, правило работает как заранее установленное обязательство: студенту проще сопротивляться цифровым соблазнам, когда телефон уже лежит в ящике, а не манит с парты.
Объяснить результат тем, что преподаватели стали несправедливо завышать оценки, маловероятно. В системе централизованного оценивания Одиши от 60% до 80% итоговой отметки по курсу составляют внешние экзамены с анонимной проверкой. Особенно показательно, что эффект проявился в некоторых не-STEM-дисциплинах: там внешние экзамены дают 80% итоговой оценки, а у преподавателей остаётся меньше свободы при выставлении баллов.
Но переносить выводы на все школы и страны стоит осторожно. Эксперимент проводили в вузах восточной Индии, где студенты уже прошли отбор. Между тем большая часть споров о запретах касается начальных и средних школ. Поскольку сильнее всего выиграли первокурсники и студенты с более низкими результатами, эффект у школьников может оказаться больше, считают авторы, — но это пока гипотеза, которую нужно проверять отдельно.
Результаты могут отличаться и в более богатых странах, где на занятиях часто используют ноутбуки, планшеты и умные часы. Кроме того, исследование проверяло только запрет на время лекций: между занятиями студенты получали телефоны обратно. Это не то же самое, что запрет «от звонка до звонка», который может иначе повлиять на общение, самочувствие и повседневные цифровые привычки.
Есть и ограничения измерений. Исследователи не располагали данными, связывающими конкретных преподавателей с отдельными курсами, поэтому не смогли полностью исключить небольшие изменения в той части оценки, которую выставляли внутри курса. А наблюдения в аудиториях были разведочными: наблюдателям не сообщали, где действует запрет, но догадаться можно было по наличию телефонов на партах или деревянных ящиков.
Главный риск — превратить результаты в лозунг «экраны — враг». Авторы отдельно предупреждают: у цифровых устройств есть и вред, и польза, а их исследование не оценивало образовательные технологии в целом. Вывод уже и прозаичнее: непродуктивное использование телефона, которое отвлекает во время лекции, может ухудшать успеваемость. Из этого не следует, что правильно разработанная образовательная технология тоже вредна.
Дальше исследователи хотят изучить ограничения на уровне всей школы и проверить, что происходит с учениками младшего возраста. Им важно понять, влияют ли запреты на благополучие и травлю за пределами аудитории — например, в столовой или коридоре. Отдельный вопрос — искусственный интеллект: некоторые школы и правительства уже ограничивают доступ к ИИ-инструментам, опасаясь, что они мешают учиться и отвлекают. Исследования возможного вреда существуют, но для обоснованных правил в отношении специально созданных образовательных ИИ-инструментов данных пока недостаточно.
Работа называется Phones impede learning: Evidence from a massive phone-free classroom experiment — «Телефоны мешают учёбе: данные масштабного эксперимента в аудиториях без смартфонов». Её авторы — Alp Sungu, Pradeep Kumar Choudhury и Andreas Bjerre-Nielsen. Вывод не в том, что деревянный ящик спасёт образование. Скорее, иногда самый технологичный способ помочь студенту — на время лекции убрать технологию под крышку.