- 4 шкалы
- 19 вопросов
- Онлайн-расчёт бесплатно
- Авторы
- M. D. Dixson, 2015 (Университет Индианы и Университет Пердью, Форт-Уэйн, США)
- Контингент
- Студенты вузов, обучающиеся на онлайн-курсах; валидизация — студенты американских университетов (186 человек в основной выборке, 34 в проверке по данным системы управления обучением).
Шкала вовлечённости студента в онлайн-курс (Online Student Engagement Scale, OSE) — опросник из 19 утверждений о поведении, мыслях и чувствах студента на онлайн-курсе. Каждое утверждение оценивается по 5-балльной шкале: от 1 («совсем не характерно для меня») до 5 («очень характерно для меня»). Утверждения образуют 4 шкалы: навыки, эмоции, участие и взаимодействие, результативность.
Шкалу разработала Марсия Диксон (M. D. Dixson) из Университета Индианы и Университета Пердью в Форт-Уэйне; описание и проверка опубликованы в журнале Online Learning в 2015 году. Под вовлечённостью автор понимает меру, в которой студенты активно думают, обсуждают и взаимодействуют с содержанием курса, другими студентами и преподавателем.
Шкала создавалась в несколько шагов: фокус-группа сформулировала 30 пунктов, пилот на 31 студенте показал высокую надёжность (альфа Кронбаха = 0,95), а проверка на 186 студентах 38 курсов шести кампусов дала факторную структуру из 19 пунктов с нагрузками не ниже 0,60 и четырьмя факторами (альфа = 0,91). В работе 2015 года на 34 студентах показано, что балл OSE связан с реальным поведением в системе управления обучением: с числом «прикладных» действий (сообщения на форуме, письма, тесты) корреляция r = 0,48 (p < 0,01), а с «наблюдательными» (чтение, просмотр материалов) значимой связи не найдено.
Навыки — регулярность занятий, организованность, конспектирование, внимательное чтение. Эмоции — усилия, интерес, стремление усвоить материал и связать его с собственной жизнью. Участие и взаимодействие — активность на форумах, помощь однокурсникам, онлайн-общение. Результативность — стремление и умение получать хорошие оценки.
Зачем это в дипломе. OSE подходит для работ по дистанционному образованию и учебной мотивации: сравнить вовлечённость студентов очной и онлайн-форм, оценить эффект изменений в организации курса, связать вовлечённость с успеваемостью или удовлетворённостью обучением. Русской адаптации в открытом доступе не найдено, поэтому в дипломе нужно указать, что использован авторский перевод пунктов, и проверить надёжность шкал на своей выборке.
Онлайн-расчёт и генерация данных
БесплатноПройдите тест для себя и узнайте свой результат — или обработайте данные группы для диплома: таблица, график и выгрузка в Word.
Шаг 1. Что вам нужно?
Шкалы методики
Навыки
Учебные навыки и привычки: регулярные занятия, чтение материалов, повторение конспектов, организованность, внимательность.
пункты 1, 3, 4, 5, 6, 7 (6 пунктов)
Эмоции
Усилия, интерес и стремление усвоить материал, умение сделать курс значимым и интересным для себя.
пункты 2, 8, 9, 10, 11 (5 пунктов)
Участие и взаимодействие
Активность на форумах и в чатах, помощь однокурсникам, знакомство с другими студентами группы.
пункты 12, 13, 14, 17, 18, 19 (6 пунктов)
Результативность
Стремление получать хорошие оценки и успешно проходить тесты.
пункты 15, 16 (2 пункта)
Полный текст методики
Подумайте о конкретном онлайн-курсе. Насколько хорошо следующие действия, мысли и чувства описывают вас в рамках этого курса? Оцените каждый пункт по шкале от 1 («совсем не характерно для меня») до 5 («очень характерно для меня»).
Шкала ответов: 1 — совсем не характерно для меня 2 — не совсем характерно для меня 3 — умеренно характерно для меня 4 — характерно для меня 5 — очень характерно для меня
- 1.Следить за тем, чтобы заниматься регулярно.
- 2.Прилагать усилия.
- 3.Не отставать от чтения материалов курса.
- 4.Просматривать конспекты между заходами на курс, чтобы убедиться, что я понимаю материал.
- 5.Быть организованным.
- 6.Вести хорошие конспекты по читаемым материалам, презентациям PowerPoint и видеолекциям.
- 7.Слушать и читать внимательно.
- 8.Находить способы сделать материал курса значимым для моей жизни.
- 9.Применять материал курса в своей жизни.
- 10.Находить способы сделать курс интересным для меня.
- 11.По-настоящему хотеть усвоить материал.
- 12.Получать удовольствие от онлайн-чатов, обсуждений или переписки по электронной почте с преподавателем или другими студентами.
- 13.Активно участвовать в форумах для обсуждения в малых группах.
- 14.Помогать однокурсникам.
- 15.Получать хорошую оценку.
- 16.Хорошо справляться с тестами и контрольными заданиями.
- 17.Участвовать в онлайн-разговорах (чат, обсуждения, электронная почта).
- 18.Регулярно писать на форуме обсуждений.
- 19.Знакомиться с другими студентами в группе.
Ключи: как обрабатываются ответы
- 1Каждый из 19 пунктов оценивается по 5-балльной шкале: 1 — совсем не характерно для меня, 2 — не совсем характерно, 3 — умеренно характерно, 4 — характерно, 5 — очень характерно для меня.
- 2Обратных пунктов нет — перекодировка не требуется.
- 3Навыки — средний балл пунктов 1, 3, 4, 5, 6, 7.
- 4Эмоции — средний балл пунктов 2, 8, 9, 10, 11.
- 5Участие и взаимодействие — средний балл пунктов 12, 13, 14, 17, 18, 19.
- 6Результативность — средний балл пунктов 15 и 16.
- 7Каждая шкала даёт число от 1,00 до 5,00; чем выше, тем сильнее выражена вовлечённость по этой составляющей. Суммарный балл по 19 пунктам лежит в диапазоне 19–95 (средний на пункт — 1,00–5,00).
Как обрабатывать математически
Единица измерения
Средний балл на пункт — от 1,00 до 5,00 по каждой из 4 шкал
Тип шкалы
Композит из порядковых пунктов Лайкерта → ранговые методы
Как описывать
Медиана и квартили (Me, Q1–Q3) по каждой шкале
Основные критерии
Вилкоксон / Манна-Уитни
Итог по шкале OSE — среднее по 2–6 порядковым пунктам Лайкерта, поэтому значений немного, а у добровольцев распределения часто скошены к высоким баллам (автор сам отмечает смещение из-за добровольного участия). Готовых границ «низкий/средний/высокий» у автора нет, поэтому для диплома описывают шкалы медианой и квартилями и сравнивают группы или замеры ранговыми критериями. Шкала «Результативность» состоит всего из двух пунктов, её значения принимают лишь девять вариантов (шаг 0,5).
Пошаговый план расчёта
- 1Переведите ответы по всем 19 пунктам в баллы от 1 до 5 (1 — совсем не характерно для меня, 5 — очень характерно). Обратных пунктов нет, перекодировка не нужна.
- 2Разнесите пункты по 4 шкалам согласно ключу (см. разделы «Шкалы» и «Как считать» ниже).
- 3По каждой шкале посчитайте средний балл на пункт: сумму баллов шкалы разделите на число её пунктов (6, 5, 6 и 2). При желании можно найти и общий средний балл по 19 пунктам, как в статье автора.
- 4Опишите выборку по каждой шкале медианой и квартилями (Me, Q1–Q3) и сравните значения критерием, подобранным по дизайну исследования (таблица ниже).
- 5Если в работе используется авторский перевод пунктов, проверьте внутреннюю согласованность каждой шкалы на своей выборке.
Какой критерий выбрать
Пример обработки результатов
8 студентам онлайн-курса измерили шкалу «Участие» OSE до и после введения в курс групповых заданий и обязательных обсуждений на форуме. Сравниваем средние баллы на пункт.
До: 2,33 2,67 3,00 2,17 3,33 2,83 2,50 3,17
После: 3,17 3,33 3,50 2,67 3,83 3,50 3,00 3,67
- 1Дизайн: одни и те же 8 студентов, два замера (до и после изменения курса) → критерий Вилкоксона для связанных выборок.
- 2До: медиана Me = 2,75 (Q1–Q3 = 2,46–3,04); после — Me = 3,42 (Q1–Q3 = 3,13–3,54).
- 3У всех 8 студентов балл вырос, сдвигов в обратную сторону нет: T эмп = 0. При n = 8 T крит = 3 (p ≤ 0,05). Поскольку T эмп ≤ T крит, рост шкалы «Участие» статистически значим (p < 0,05).
Как оформить это в дипломе
В таблице 1 представлены медиана и квартили шкалы «Участие» OSE до и после введения групповых заданий, а также результат критерия Вилкоксона.
Таблица 1 — Шкала «Участие» OSE до и после введения групповых заданий (n = 8)
| Шкала | Q₂₅ | Me | Q₇₅ | T эмп | T крит | p |
|---|---|---|---|---|---|---|
| Участие | 2,46 | 2,75 | 3,04 | 0 | 3 | < 0,05 |
На рисунке 1 графически представлена динамика медианного балла шкалы «Участие» до и после введения групповых заданий.
Рисунок 1 — Медиана шкалы «Участие» OSE до и после введения групповых заданий
Медианный балл по шкале «Участие» вырос с 2,75 до 3,42 (на 0,67 балла по шкале 1–5): у всех 8 студентов выросла активность на форумах, помощь однокурсникам и общение с группой. Разброс значений после вмешательства стал немного меньше.
Значимость сдвига оценивалась непараметрическим критерием Вилкоксона для связанных выборок (балл шкалы — композит из шести порядковых пунктов, замеры парные, выборка мала). T эмп = 0 при T крит = 3 (n = 8, p ≤ 0,05). Поскольку T эмп ≤ T крит, рост вовлечённости по шкале «Участие» признаётся статистически значимым (p < 0,05).
Вывод
После введения групповых заданий участие студентов по OSE значимо выросло (T эмп = 0, p < 0,05): медиана увеличилась с 2,75 до 3,42 балла, рост отмечен у всех 8 студентов.
Состав шкал OSE
Нумерация пунктов — по приложению A статьи автора. Распределение пунктов по факторам в статье приведено в таблице 2 по формулировкам пунктов, без номеров, поэтому номера в ключе ниже сопоставлены с формулировками (соответствие однозначное: 6 + 5 + 6 + 2 = 19 пунктов). Обратных пунктов нет, баллы шкалы усредняются напрямую.
Шкалы OSE: номера пунктов и диапазон среднего балла
| Шкала | Номера пунктов | Кол-во | Диапазон среднего |
|---|---|---|---|
| Навыки | 1, 3, 4, 5, 6, 7 | 6 | 1,00–5,00 |
| Эмоции | 2, 8, 9, 10, 11 | 5 | 1,00–5,00 |
| Участие и взаимодействие | 12, 13, 14, 17, 18, 19 | 6 | 1,00–5,00 |
| Результативность | 15, 16 | 2 | 1,00–5,00 |
Автор использует и общий показатель вовлечённости (среднее по 19 пунктам, сумма 19–95), но границ уровней не вводит.
Почему у шкалы нет готовых уровней
Автор OSE не задал границы «низкая / средняя / высокая вовлечённость»: статья посвящена созданию шкалы и проверке её надёжности и валидности. Поэтому на странице нет цветных зон интерпретации — придуманные пороги были бы выдумкой.
Для ориентира можно смотреть на средние по всем 19 пунктам из статьи: 3,41 в исследовании 2010 года (186 студентов шести кампусов) и 4,02 при SD = 0,49 в проверке 2015 года (29 студентов коммуникационных курсов). Автор сам предупреждает, что обе выборки добровольные, а более вовлечённые студенты охотнее соглашаются участвовать, так что это описание выборок, а не нормы.
Что показала проверка валидности
В работе 2015 года у 29 студентов (из 34 участников пятеро выбыли из корреляционного анализа из-за пропусков) сопоставили балл OSE с данными системы управления обучением. С «прикладными» действиями (отправленные сообщения, сообщения на форуме, пройденные тесты, сданные задания) связь значима: r = 0,48 (p < 0,01). С «наблюдательными» действиями (прочитанные письма и сообщения, просмотренные страницы и файлы) значимой связи нет: r = 0,32 (p не значимо).
Автор подчёркивает, что подсчёт количества действий — грубая мера и не показывает, насколько внимательно студент работал с материалом. Надёжность на этой выборке: альфа Кронбаха = 0,86; на основной выборке из 186 студентов — 0,91.