Исследование использования ИИ-ассистента Syntea: данные 77 543 студентов

Крупномасштабное исследование использования ИИ-ассистента Syntea в высшем образовании впервые предоставляет объективные данные о том, как студенты взаимодействуют с образовательным чат-ботом. Ученые проанализировали логи 77 543 студентов заочных отделений, чтобы выявить паттерны использования в зависимости от пола, возраста, направления обучения и других факторов. Работа опубликована на arXiv и представляет собой описательный анализ, который помогает понять реальное внедрение AI-инструментов в учебный процесс.

До сих пор большинство исследований образовательных чат-ботов основывались на небольших выборках или самоотчетах студентов, что ограничивало достоверность выводов. Новое исследование использует объективные данные логов, что позволяет получить более точную картину. Syntea — это AI-ассистент, встроенный в учебные процессы, который помогает студентам с вопросами, заданиями и навигацией по курсам. Анализ охватывает 77 543 студента дистанционной формы обучения из разных вузов, что делает выборку репрезентативной для заочного образования.

Как проводилось исследование

Исследователи собрали логи использования Syntea за определенный период, включая информацию о каждом взаимодействии студента с ассистентом. Данные были анонимизированы и включали демографические параметры: пол, возрастную группу, учебный кластер (специальность), уровень образования (бакалавр или магистр) и формат обучения. Методом описательного анализа ученые оценили частоту и продолжительность сессий, типы запросов и общую активность.

Важно отметить, что исследование не ставило целью выявить причинно-следственные связи. Например, оно не отвечает на вопрос, улучшает ли Syntea успеваемость. Вместо этого работа фокусируется на описании того, как разные группы студентов используют ассистента. Такой подход позволяет выявить закономерности, которые могут быть полезны для дальнейших исследований и улучшения AI-инструментов.

Основные результаты: кто и как использует Syntea

Анализ показал, что Syntea уже интегрирован в учебные рутины многих студентов, но интенсивность и характер использования варьируются. Например, студенты мужского пола в среднем чаще обращаются к ассистенту, чем студентки, хотя разница не является драматической. Возраст также играет роль: более молодые студенты (до 25 лет) используют Syntea активнее, чем старшие возрастные группы. Однако исследование не приводит точных числовых значений, так как это описательный анализ.

Направление обучения влияет на паттерны использования: студенты технических специальностей чаще задают вопросы по программированию и математике, тогда как гуманитарии — по теории и написанию текстов. Уровень образования тоже имеет значение: магистранты используют ассистента более целенаправленно, в то время как бакалавры обращаются к нему чаще по базовым вопросам. Формат обучения (полностью дистанционный или смешанный) также коррелирует с частотой использования: полностью дистанционные студенты активнее.

Почему это важно для образования

Результаты исследования имеют практическое значение для разработчиков образовательных AI-инструментов, преподавателей и администраторов вузов. Понимание того, как разные группы студентов взаимодействуют с ассистентом, позволяет улучшить персонализацию. Например, если студентки реже используют Syntea, возможно, интерфейс или стиль общения ассистента нужно адаптировать под их предпочтения. Аналогично, для старших студентов можно добавить более подробные объяснения или альтернативные способы подачи информации.

Для преподавателей эти данные помогают интегрировать AI-ассистента в учебный процесс более эффективно. Например, если студенты определенной специальности редко используют Syntea, можно провести дополнительные тренинги или изменить способ внедрения инструмента. Администраторы вузов могут использовать результаты для принятия решений о закупке или разработке подобных систем.

Какие группы студентов используют Syntea чаще всего?

Исследователи обнаружили, что наиболее активными пользователями Syntea являются студенты мужского пола в возрасте 18–25 лет, обучающиеся на технических специальностях по программам бакалавриата в полностью дистанционном формате. Однако эти данные не являются абсолютными: внутри каждой группы есть значительная вариативность. Например, среди гуманитариев также есть активные пользователи, но их доля ниже.

Возрастная группа 26–35 лет показывает среднюю активность, а студенты старше 35 лет используют Syntea реже всего. Это может быть связано с разным уровнем цифровой грамотности или предпочтением традиционных методов обучения. Интересно, что магистранты, хотя и используют ассистента реже по количеству сессий, проводят больше времени за каждым обращением, что указывает на более глубокие запросы.

Ограничения исследования и что пока неизвестно

Как и любое описание, данное исследование имеет ограничения. Во-первых, оно не включает статистическую проверку значимости различий между группами, поэтому нельзя утверждать, что наблюдаемые различия не случайны. Во-вторых, данные получены только от студентов заочных отделений, что ограничивает обобщение на очные формы обучения. В-третьих, исследование не анализирует влияние Syntea на успеваемость или удовлетворенность студентов — это задача для будущих работ.

Также неизвестно, как долго студенты используют ассистента: есть ли эффект привыкания или, наоборот, снижение интереса со временем. Не изучалось и качество ответов Syntea: насколько они точны и полезны. Тем не менее, работа закладывает основу для более глубоких исследований, предоставляя эмпирические данные о реальном использовании AI в образовании.

Кого затронут результаты

Результаты исследования будут полезны разработчикам образовательных AI-инструментов, которые получат данные для улучшения персонализации и адаптации ассистентов под разные группы пользователей. Преподаватели и администраторы вузов смогут лучше понять, как внедрять AI-ассистентов в учебный процесс, чтобы повысить их эффективность. Студенты, в свою очередь, могут ожидать более адаптивных и полезных AI-помощников в будущем. Исследователи в области образовательных технологий получат референтные данные для сравнения с другими системами.

Перспективы дальнейших исследований

Данная работа открывает путь для более глубоких анализов. Например, можно провести регрессионный анализ, чтобы выявить факторы, наиболее сильно влияющие на использование Syntea. Также интересно было бы изучить связь между активностью использования и академическими результатами, а также провести качественные интервью со студентами для понимания их мотивации. Сравнение с другими AI-ассистентами позволило бы оценить, насколько паттерны использования уникальны для Syntea.

В целом, исследование подтверждает, что AI-ассистенты становятся неотъемлемой частью образовательного процесса, особенно в дистанционном обучении. Однако их эффективность зависит от учета демографических и структурных особенностей студентов. Дальнейшие работы помогут сделать эти инструменты еще более полезными и доступными для всех категорий учащихся.