- 6 шкал
- 38 вопросов
- Онлайн-расчёт бесплатно
- Авторы
- F. Martin, D. U. Bolliger, C. Flowers, 2021
- Контингент
- Преподаватели и разработчики (методисты, инструкционные дизайнеры) онлайн-курсов в вузе; проверен на выборке 222 человек.
OCDE — инструмент самооценки для преподавателей и разработчиков онлайн-курсов: 38 пунктов описывают элементы дизайна курса, и на каждый отвечают, как часто вы включаете его в свои курсы, по шкале от 1 («никогда») до 5 («всегда»). Пункты образуют пять подшкал; итог — пять средних баллов и общий балл.
Инструмент создан Мартин, Боллигер и Флауэрс (2021) на основе обзора шести рубрик оценки качества онлайн-курсов (Baldwin et al., 2018). Он предназначен не для студентов, а для тех, кто проектирует курс: преподавателей, методистов, инструкционных дизайнеров. Пять подшкал: обзор курса (11 пунктов), представление содержания (6), взаимодействие и коммуникация (7), оценивание (7), поддержка обучающихся (7).
Проверка на выборке 222 преподавателей и дизайнеров показала надёжность всего инструмента α = 0,91 и подшкал от 0,66 до 0,83. Авторы рекомендуют использовать OCDE как единое целое, а выводы по отдельным подшкалам делать осторожно, особенно по представлению содержания (α = 0,66). Общий балл был связан с самооценкой уровня экспертизы, но не со стажем.
В дипломных работах по педагогике и цифровому образованию OCDE подходит для сравнения практик разных групп преподавателей (стаж, дисциплина, формат курса) и для замера «до / после» обучения дизайну курсов. Шесть открытых вопросов инструмента (о самых важных элементах и недостающих элементах) в подсчёт не входят. Обратных пунктов нет.
Онлайн-расчёт и генерация данных
БесплатноПройдите тест для себя и узнайте свой результат — или обработайте данные группы для диплома: таблица, график и выгрузка в Word.
Шаг 1. Что вам нужно?
Шкалы методики
Обзор курса (ОК)
Ориентация студента в курсе: цели, требования к участию и работам, контакты и доступность преподавателя, правила курса.
1–11, все пункты прямые
Представление содержания (ПС)
Как подан материал: разнообразие ресурсов, доступность, модульность, ясные инструкции и цели.
12–17, все пункты прямые
Взаимодействие и коммуникация (ВК)
Взаимодействие студентов с преподавателем и друг с другом, формирование сообщества, технологии вовлечения.
18–24, все пункты прямые
Оценивание (ОЦ)
Соответствие оценивания целям, формирующие и итоговые формы, критерии, самооценка, обратная связь от студентов.
25–31, все пункты прямые
Поддержка обучающихся (ПО)
Навигация, единая структура курса, доступность медиа, технические требования, связь со службами поддержки.
32–38, все пункты прямые
Общий балл OCDE
Среднее по всем 38 пунктам; авторы рекомендуют опираться на него, а не на отдельные подшкалы.
1–38, все пункты
Полный текст методики
Инструкция: «Укажите, как часто вы включаете в свои онлайн-курсы следующие элементы дизайна». Шкала ответов: 1 — никогда, 2 — редко, 3 — иногда, 4 — часто, 5 — всегда.
Шкала ответов: 1 — никогда 2 — редко 3 — иногда 4 — часто 5 — всегда
- 1.Ознакомительное введение для студентов (например, видеообзор элементов курса).
- 2.Основные цели курса.
- 3.Требования к качеству общения студентов (например, сетевой этикет).
- 4.Требования к участию студентов (например, сроки, регулярность).
- 5.Требования к качеству студенческих работ (например, хорошие образцы).
- 6.Контактные данные преподавателя.
- 7.Доступность преподавателя в часы консультаций.
- 8.Биография преподавателя.
- 9.Время, за которое преподаватель отвечает на письма и (или) звонки.
- 10.Срок, в который преподаватель даёт обратную связь по сданным заданиям.
- 11.Правила, задающие общие требования к студентам (например, сдача работ с опозданием, академическая честность).
- 12.Разнообразные учебные материалы (например, чтение учебника, видеолекции, интернет-ресурсы).
- 13.Специальные условия для обучающихся с ограниченными возможностями (например, расшифровки, субтитры).
- 14.Содержание курса, разбитое на модули или разделы.
- 15.Чётко написанные инструкции.
- 16.Учебные задания, способствующие достижению целей курса.
- 17.Чётко определённые (например, измеримые) цели курса.
- 18.Возможности для студентов взаимодействовать с преподавателем.
- 19.Обязательное взаимодействие студентов друг с другом (например, оцениваемые задания).
- 20.Регулярное взаимодействие студентов друг с другом (например, еженедельное).
- 21.Задания, формирующие сообщество группы (например, знакомства, «ледоколы»).
- 22.Совместные задания, поддерживающие обучение (например, групповые работы).
- 23.Технологии, повышающие вовлечённость обучающихся (например, синхронные средства, форумы обсуждения).
- 24.Технологии, обеспечивающие активное обучение (например, создание студентами собственных работ).
- 25.Оценивание, соответствующее целям обучения.
- 26.Формирующее оценивание, дающее обратную связь о прогрессе обучающихся (например, обсуждения, тренировочные задания).
- 27.Итоговое оценивание для измерения результатов обучения (например, выпускной экзамен, итоговый проект).
- 28.Оценивание на протяжении всего курса.
- 29.Критерии оценивания (рубрики) для оцениваемых заданий.
- 30.Возможности самооценки для обучающихся (например, тесты для самопроверки).
- 31.Возможность для обучающихся дать отзыв об улучшении курса.
- 32.Удобная навигация по курсу (например, меню).
- 33.Единая структура курса (оформление, внешний вид).
- 34.Медиа, которые легко просматривать (например, потоковое видео, оптимизированная графика).
- 35.Медиафайлы, доступные на разных платформах и устройствах (например, планшеты, смартфоны).
- 36.Минимальные технические требования (например, операционные системы).
- 37.Ресурсы для доступа к технологиям (например, руководства, обучающие материалы).
- 38.Ссылки на службы поддержки вуза (например, служба технической поддержки, библиотека, тьюторы).
Ключи: как обрабатываются ответы
- 1Шаг 1: на каждый из 38 пунктов выберите частоту включения элемента в свои онлайн-курсы: 1 — никогда, 2 — редко, 3 — иногда, 4 — часто, 5 — всегда.
- 2Шаг 2: обратных пунктов нет, перекодировка не требуется. Открытые вопросы (отмечены звёздочкой в оригинале) в подсчёт не входят.
- 3Шаг 3: вычислите среднее по пунктам каждой подшкалы: обзор курса — 1–11, представление содержания — 12–17, взаимодействие и коммуникация — 18–24, оценивание — 25–31, поддержка обучающихся — 32–38. Общий балл — среднее по всем 38 пунктам.
- 4Проверка: 11 + 6 + 7 + 7 + 7 = 38 пунктов; минимум среднего 1, максимум 5.
- 5Пороги автором не заданы; сравнивайте группы между собой или с описанием выборки автора (обзор 4,47; содержание 4,67; взаимодействие 4,21; оценивание 4,44; поддержка 4,51; N = 222).
Как обрабатывать математически
Единица измерения
Среднее по подшкале, от 1 до 5
Тип шкалы
Порядковая (среднее пунктов 1–5)
Как описывать
Медиана и квартили; среднее и SD при нормальном распределении
Основные критерии
Манна-Уитни / Вилкоксона, корреляция Спирмена
Ответы на пунктах — порядковые (от «никогда» до «всегда»), и у выборки автора все средние по пунктам превышают 4,0 (кроме двух), то есть возможен потолочный эффект. Поэтому надёжнее ранговые критерии и описание медианой и квартилями; нормальность на своей выборке проверяйте критерием Шапиро-Уилка.
Пошаговый план расчёта
- 1Убедитесь, что на все 38 пунктов даны ответы; открытые вопросы в подсчёт не берутся. Обратных пунктов нет, перекодировка не нужна.
- 2Для каждого респондента вычислите пять средних: по пунктам 1–11, 12–17, 18–24, 25–31, 32–38, и общий балл — среднее по всем 38 пунктам.
- 3Проверьте распределение по каждой подшкале (критерий Шапиро-Уилка) и опишите группу: Me и квартили или среднее и SD.
- 4Сравните группы или замеры подходящим критерием; для надёжности подшкал на своей выборке посчитайте альфу Кронбаха.
Какой критерий выбрать
Пример обработки результатов
8 преподавателей заполнили OCDE до и после курса повышения квалификации по дизайну онлайн-обучения. Сравниваем общий балл (среднее по 38 пунктам).
До: 3,4 3,9 3,1 4,2 3,6 3,0 4,0 3,5
После: 3,9 4,3 3,5 4,5 4,0 3,6 4,4 3,8
- 1Дизайн: одни и те же 8 преподавателей, два замера, шкала порядковая → критерий Вилкоксона.
- 2Медиана до: Me = 3,55; после: Me = 3,95. Рост на 0,40 балла.
- 3Критерий Вилкоксона: у всех 8 преподавателей общий балл вырос, T эмп = 0. При n = 8 T крит = 3 (p < 0,05). Поскольку 0 ≤ 3, рост статистически значим (p < 0,01).
Как оформить это в дипломе
В таблице 1 представлены медиана и квартили общего балла OCDE до и после курса, а также результат критерия Вилкоксона.
Таблица 1 — Общий балл OCDE до и после курса повышения квалификации (n = 8)
| Показатель | Q₂₅ | Me | Q₇₅ | T эмп | T крит | p |
|---|---|---|---|---|---|---|
| Общий балл OCDE | 3,25 | 3,55 | 3,95 | 0 | 3 | < 0,01 |
На рисунке 1 графически представлена динамика медианного общего балла OCDE до и после курса.
Рисунок 1 — Медианы общего балла OCDE до и после курса повышения квалификации
Медианное значение общего балла OCDE выросло с 3,55 до 3,95 (+0,40 балла). Это означает, что после курса преподаватели в среднем чаще включают элементы дизайна в свои онлайн-курсы. Общий балл вырос у всех 8 участников.
Статистическая значимость сдвига оценивалась непараметрическим критерием Вилкоксона (общий балл OCDE — порядковая шкала). T эмп = 0 при T крит = 3 (n = 8, p = 0,05). Поскольку T эмп ≤ T крит, рост признаётся статистически значимым (p < 0,05).
Вывод
После курса общий балл OCDE значимо вырос (T эмп = 0, p < 0,05): медиана увеличилась с 3,55 до 3,95.