3. Разработка контрольных мероприятий

Сайт: LMS MOODLE КНИТУ-КАИ
Курс: Практика создания электронного курса в LMS MOODLE
Книга: 3. Разработка контрольных мероприятий
Напечатано:: Гость
Дата: пятница, 22 ноября 2024, 06:55

План

  1. Основные типы вопросов.
  2. Дополнительные типы вопросов.
  3. Требования к формулировке вопросов.
  4. Разработка контрольных мероприятий для практических и лабораторных работ.

1. Основные типы вопросов

Для последующей разработки контрольных заданий необходимо знать, какие возможности может предоставить система Moodle в плане создания тестовых вопросов.

В первую очередь нас интересуют не простые типовые вопросы на воспроизведение знаний, а такие вопросы, которые позволяют применять их. Ниже на рисунках Вы можете посмотреть примеры таких необычных вопросов, найденных на площадках МООК Stepik и Openedu. Чтобы посмотреть на вопрос непосредственно в курсе, увидеть контекст его применения, попробовать ответить на него, перейдите по ссылке в описании под рисунками. Разумеется, Вам придётся записаться на эти курсы.

О реализации представленных здесь вопросов в среде Moodle вы можете узнать в соответствующих материалах этого курса.

Множественный выбор

Обучаемому предлагается список вариантов ответа, из которых он должен выбрать один (или несколько) правильных вариантов.

Это самый распространённый и всем знакомый тип вопросов. Существуют, однако, довольно необычные способы применения этого простого вида вопроса. Ниже рассмотрим примеры.

Пример 1

1-01

Источник: https://stepik.org/lesson/8240/step/4?unit=1416


Пример 2

1-02

Источник: https://stepik.org/lesson/10246/step/9?unit=1977


Пример 3

1-03

Источник: https://stepik.org/lesson/9522/step/7?unit=1783


Пример 4

1-04

Источник: https://stepik.org/lesson/46770/step/2?unit=24826


Пример 5

1-05

Источник: https://stepik.org/lesson/46770/step/4?unit=24826


Пример 6

1-06

Источник: https://stepik.org/lesson/12313/step/5?unit=2784


Пример 7

1-07

Источник: https://stepik.org/lesson/7041/step/3?unit=1258


Пример 8

1-08

Источник: https://stepik.org/lesson/65388/step/15?unit=42368


Пример 9

1-09

Источник: https://stepik.org/lesson/75130/step/7?unit=52054


Пример 10

1-10

Источник: https://courses.openedu.ru/courses/course-v1:urfu+ENGM+spring_2019/courseware/441fc735ccea45b3ac99e4edf81e05c3/07e3f5e49b3a42619a1554984ce2fc2f/


Пример 11

1-11

Источник: https://courses.openedu.ru/courses/course-v1:urfu+ENGM+spring_2019/courseware/441fc735ccea45b3ac99e4edf81e05c3/07e3f5e49b3a42619a1554984ce2fc2f/


Пример 12

1-12

Источник: https://courses.openedu.ru/courses/course-v1:urfu+ENGM+spring_2019/courseware/668dd094660f4ddabdc3f94a164bca5b/f854e1bbc9484f03adf2127435204350/


Пример 13

1-13

Источник: https://courses.openedu.ru/courses/course-v1:urfu+ENGM+spring_2019/courseware/7bb969e348b942298534ef29aaa7e3a0/79769356d93f4e269b61244432a96742/

Числовой Ответ

В качестве ответа обучаемому предлагается ввести в поле некоторое число (например, полученное в результате тех или иных расчётов).

Пример 1.

2-01

Источник: https://stepik.org/lesson/8245/step/5?unit=1421


Пример 2

2-02

Источник: https://stepik.org/lesson/8251/step/3?unit=1426


Пример 3

2-03

Источник: https://stepik.org/lesson/46895/step/5?unit=24916


Пример 4

2-04

Источник: https://stepik.org/lesson/8244/step/13?unit=1420


Пример 5

2-05

Источник: https://stepik.org/lesson/6176/step/8?unit=1262


Пример 6

2-06

Источник: https://stepik.org/lesson/23297/step/5?unit=5535


Пример 7

2-07

Источник: https://stepik.org/lesson/65782/step/12?unit=42742


Пример 8

2-08

Источник: https://stepik.org/lesson/65782/step/16?unit=42742


Пример 9

2-09

Источник: https://courses.openedu.ru/courses/course-v1:urfu+ENGM+spring_2019/courseware/441fc735ccea45b3ac99e4edf81e05c3/cdd8cc2943194f258fab5fd675c5d873/

Короткий ответ

Обучаемому предлагается ответить на вопрос, введя в текстовое поле некоторую фразу (состоящую из одного или нескольких слов). Ответ считается верным, если он в точности совпадёт с предусмотренным автором вариантом (-ами).

Данный тип вопроса следует использовать с осторожностью: точно формулировать вопрос, прописать детальную инструкцию о том, как следует записывать ответ, т.к. любое несовпадение с верным значением будет засчитано, как неверный ответ.

Рекомендуется не вводить в качестве правильного длинные фразы, которые могут быть сформулированы по-разному и включать в себя знаки препинания.

Кроме того, можно ввести в качестве правильного ответа несколько возможных вариантов. А если на курсе работает обратная связь и тьюторы/авторский коллектив будут отслеживать отзывы обучающихся, то со временем наберётся большое количество возможных правильных вариантов ввода.

Полностью отказываться от такого типа вопросов, несмотря на возможные трудности, также не стоит. Поскольку "Короткий ответ" предполагает самостоятельную работу студента по поиску правильного ответа.

Пример 1

3-01

Источник: https://stepik.org/lesson/85613/step/11?unit=62106


Пример 2

3-02

Источник: https://stepik.org/lesson/62274/step/7?unit=39154


Пример 3

3-03

Источник: https://stepik.org/lesson/6174/step/9?unit=1232


Пример 4

3-04

Источник: https://stepik.org/lesson/9532/step/4?unit=1793


Пример 5

3-05

Источник: https://stepik.org/lesson/9537/step/6?unit=1798


Пример 6

3-06

Источник: https://stepik.org/lesson/12313/step/13?unit=2784


Пример 7

3-07

Источник: https://stepik.org/lesson/11327/step/8?unit=2438


Пример 8

3-08

Источник: https://stepik.org/lesson/11343/step/9?unit=2453


Пример 9

3-09

Источник: https://stepik.org/lesson/11329/step/2?unit=2439

На соответствие

Обучаемому предлагается установить соответствие между элементами левого и правого списков.

Любопытно, что данный тип вопросов может быть применён для решения физико-математических задач. Эти и другие примеры применения рассмотрим ниже.

Пример 1

4-01

Источник: https://stepik.org/lesson/85621/step/4?unit=62115


Пример 2

4-02

Источник: https://stepik.org/lesson/8241/step/14?unit=1417


Пример 3

4-03

Источник: https://stepik.org/lesson/65374/step/8?unit=42324


Пример 4

4-04

Источник: https://stepik.org/lesson/65652/step/16?unit=42619


Пример 5

4-05

Источник: https://stepik.org/lesson/26529/step/12?unit=8384


Пример 6

4-06

Источник: https://stepik.org/lesson/25695/step/4?unit=7816


2. Дополнительные виды вопросов

Представленные в этом разделе вопросы вынесены отдельно по причине либо достаточно высокой трудоёмкости, либо редкости их использования. Тем не менее, полезно знать о тех возможностях, которые они могут предоставить создателю курсов.

Вычисляемый

Это тип вопроса, ответом на который является число, но условие и ответ генерируются случайным образом по заранее заданным авторами вопроса критериям.

Вычисляемый вопрос напоминает числовой и для обучаемого эти два типа вопросов внешне вообще неотличимы. Отличие от числового заключается в том, что в условие вопроса вводятся переменные, а ответы представляют собой формулы с использованием данных переменных, которые вводятся автором курса.

Подробнее о создании этого типа вопроса можно ознакомиться в соответствующих материалах этого курса, а также в справочной документации.

Выбор пропущенных слов

Пропущенные слова в тексте вопроса заполняются с помощью выпадающих меню.

Т.е. этот вопрос представляет собой комбинацию вопросов типа "Множественный выбор", внедрённых в тело вопроса. Ниже представлены примеры использования.

Пример 1

5-01

Источник: https://stepik.org/lesson/26531/step/13?unit=8386


Пример 2

5-02

Источник: https://stepik.org/lesson/26531/step/15?unit=8386


Пример 3

5-03

Источник: https://stepik.org/lesson/26539/step/8?unit=8394


Пример 4

5-04

Источник: https://stepik.org/lesson/25695/step/6?unit=7816

Вложенные ответы (Cloze)

Представляет собой текст с вложенными в него вопросами "Множественный выбор", "Числовой ответ", "Короткий ответ".

Использовать можно произвольное количество вопросов любого типа. Недостатком является высокая трудоёмкость и необходимость вводить вопросы при помощи специального кода.

Подробнее о вопросах данного типа можно узнать в официальной документации на сайте разработчика.

Ниже представлены примеры использования данных вопросов.

Пример 1

6-01

Источник: https://stepik.org/lesson/23815/step/3?unit=6345


Пример 2

6-02

Источник: https://stepik.org/lesson/46752/step/4?unit=24815


Пример 3

6-03

Источник


Пример 4

6-04

Источник


Пример 5

6-05


Пример 6

6-08


Пример 7

6-09


Перетаскивание в текст

Представляет собой текст с пустыми областями, которые необходимо заполнить перетаскиванием предлагаемых вариантов.

По сути, это схоже с вопросом типа "Выбор пропущенных слов" с визуализацией.

Пример 1

7-01


Пример 2

7-02


Пример 3

7-03


Пример 4

7-04


Пример 5

7-05

Пример 6

7-06

Перетаскивание на изображение

Изображение или текст необходимо перетащить в зону на фоновом изображении.

Пример 1

8-01

Пример 2

8-02

Пример 3

8-03

Пример 4

8-04

Пример 5

8-05

Перетаскивание маркеров

Вопросы, в котором маркеры перетаскивается на определённую область фонового изображения.

Данный вид вопросов представляют собой модификацию "Перетаскивание на изображение" с тем отличием, что в определённую область надо попасть именно "маркером" перетаскиваемого текста или изображения. Следует применять в тех случаях, когда размеры перетаскиваемых объектов не позволяют выбрать верную область точно, либо области перекрываются друг с другом.

Пример 1

9-01

Пример 2

9-02

Пример 3

9-03

3. Требования к формулировке вопросов

Вопросы для использования в контрольных мероприятиях, должны быть:

  • сформулированы предельно чётко и понятно в строгом
    соответствии с терминологией учебного материала.
  • вопрос должен быть поставлен конкретно – он должен определять как содержание ответа, так и его форму.
  • вопрос должен быть однозначным, т.е. исключать возможность
    существования нескольких разных по смыслу верных ответов.
  • постановка вопроса должна быть информационно достаточной.

Нужно пояснить, в каком виде должен быть представлен результат выполнения задания, каковы требования к нему. Например, в вопросе типа "числовой ответ", нужно указать в каких единицах измерения и с какой точностью следует вводить результат. Примеры пояснений к численным вопросам представлены в соответствующем разделе.

В случае использования вопроса типа "Короткий ответ", следует предупредить обучаемого о формате ответа: сколько слов используется, в каком падеже предоставлять ответ, использовать ли знаки препинания и т.д. Примеры некоторых пояснений можно посмотреть в разделе посвящённому "Короткому ответу".

Кроме того, обучаемый должен иметь представление о том, как будет проходить контрольное мероприятие – в какие сроки, будут ли допускаться повторные попытки и т.д. Он должен быть информирован о том, как будут оцениваться результаты прохождения контрольного мероприятия, сколько баллов (максимум) он может получить и т.д.

Чтобы избежать ошибок при прохождении контрольных мероприятий, необходимо тщательно относится к проверке вопросов. Например, можно протестировать тестовые вопросы на наличие ошибок и неоднозначностей с помощью команды тестировщиков.

Дополнительный материал: Таксономия Блума

Для того, чтобы проектировать эффективные оценочные инструменты рекомендуем ознакомиться с дополнительными материалами по таксономии Блума.

  1. Таксономия Блума.
  2. Практическое применение таксономии Блума при проектировании электронных курсов.

4. Проектирование практических и лабораторных работ

  1. Особенности реализации практических и лабораторных работ в онлайн-обучении.
  2. Порядок проектирования практической/лабораторной работы.
  3. Примеры организации практических и лабораторных работ в онлайн-курсах на MOOK-платформах.
1. Особенности реализации практических и лабораторных работ в онлайн-обучении

Одним из основных отличий обучения онлайн от других моделей обучения (смешанного обучения, обучения с веб-поддержкой) является изменение роли преподавателя. Контролирующая функция, которую при традиционном обучении выполнял преподаватель (почти исключительно), теперь возлагается на онлайн-курс (где происходит автоматическая проверка разнообразных тестов и заданий).

Традиционно под лабораторной работой понимается вид учебной деятельности, предполагающий использование какого-либо оборудования, в ходе которой учащиеся выполняют опыты, измерения, элементарные исследования, подтверждающие изучаемые теоретические положения. В онлайн-курсах нередко лабораторными работами называют задания, предусматривающие просмотр видео, выполнение расчётных или иных заданий.

2. Порядок проектирования практической/лабораторной работы.

Разработку лабораторной/практической работы удобнее проводить по отдельным компонентам. Практическая/лабораторная работа в онлайн-курсе должна включать в себя следующие элементы:

Компонент Описание
Название  
Цель Цель выполнения работы, ожидаемые результаты
Теория Теоретический материал, который необходим для выполнения работы (это может быть видео или текстовый материал, ссылки на различные источники)
Описание, ход выполнения работы Для лабораторной работы – перечень необходимого оборудования и материалов, условия проведения эксперимента, алгоритм действий обучаемого при выполнении  работы, методические рекомендации.
Для практической работы – постановка задачи, искомые величины, требования к точности и формату вводимых в систему результатов, методические рекомендации.
Анализ Выводы, которые должен сделать обучаемый на основе анализа результатов, полученных им в ходе выполнения практической /лабораторной работы.
Проверка результатов Способ проверки результатов (тест, задание), условия проверки и правила оценивания.

К проверке результатов по выполнению практической или лабораторной работы предъявляются те же требования, что и к прочим контрольно-измерительным материалам. В том случае. если предполагается использование электронного курса в качестве МООК, то проверка результатов должна соответствовать критерию масштабируемости, т.е. допускать неограниченный рост количества обучающихся без существенного роста трудоемкости сопровождения электронного курса и без прямого участия в работе с обучающимися авторов (тьюторов) электронного курса. Строго говоря, инструментом, позволяющим реализовать такой критерий, является тест. Проектирование тестовых вопросов уже было рассмотрено нами ранее в соответствующем уроке "Разработка контрольных мероприятий".

В том случае, если предполагается обучение обычных учебных групп и количество обучаемых на курсе ограниченно, вполне допустима проверка знаний с помощью элемента курса "Задание". 

3. Примеры организации практических и лабораторных работ в онлайн-курсах на MOOK-платформах.

Далее

Пример 1

Виртуальная лабораторная работа в онлайн-курсе "Биологические основы психопатологий".

Адрес работы: https://stepik.org/lesson/197329/step/1?unit=171612

Цель работы. Научить студентов определять поведенческие характеристики подопытных животных и осуществлять их сравнительный анализ

Краткое описание. Обучаемые просматривают видеоролик, где подробно описывается предметная часть работы (в дополнение к текстовым «Методическим рекомендациям»), и два видеоролика с экспериментами по наблюдению за поведением лабораторной крысы в стрессовой ситуации. 
В процессе просмотра видео обучаемые заполняют таблицы, характеризующие показатели тревожности и других форм повеления. По окончании работы обучаемый делает анализ заполненных таблиц на предмет выявления поведенческих показателей крысы.

Анализ. Выводы, которые должен сделать обучаемый на основе анализа результатов, полученных им в ходе выполнения практической /лабораторной работы

Проверка результатов. Один вопрос типа «множественный выбор» с единственным правильным ответом.

1-01

Рис. 1.1. Описание работы.

1-02

Рис. 1.2. Видеоролик, демонстрирующий ход лабораторной работы. Эксперимент по наблюдению за поведением лабораторной крысы в стрессовой ситуации.

1-03

Рис. 1.3. Тестовый вопрос, с помощью которого проверяется и фиксируется достижение целей обучения по работе.

Пример 2

Практическая работа «Алгоритм борьбы с дребезгом» в онлайн-курсе «Цифровые устройства и микропроцессоры»

Адрес работы

Цель работы: Научить обучаемых приёмам борьбы с дребезгом.

Описание. Обучаемые просматривают видеоролик, где объясняется суть понятия «дребезг» и рассматриваются алгоритмы борьбы с дребезгом. Кроме того просматривает презентацию с теоретической частью и описанием порядка выполнения работ.
По окончании работы обучаемый отвечает на 2 вопроса по просмотренному видео.

Проверка результатов. "Короткий ответ"; "Множественный выбор" (с единственным верным ответом).

2-01

2-02

Пример 3

Лабораторная работа «Кнопка» в онлайн-курсе «Цифровые устройства и микропроцессоры».

Адрес работы

Цель работы. Выработать у обучаемых навык написания программ, переключающей светодиоды в заданном порядке (при нажатии на кнопку). Программа должна быть написана в определённой среде.

Описание. Обучаемые просматривают видеоролик, где объясняется суть понятия «дребезг» и рассматриваются алгоритмы борьбы с дребезгом. 
По окончании работы обучаемый отвечает на 2 вопроса по просмотренному видео.
Отвечает на два проверочных вопроса по видеоролику. Затем просматривает методические материалы, выполняет работу и проверяет её. После этого он вводит в соответствующие поля полученные им данные.
Чтобы ответить на эти вопросы, он должен написать и отладить программу, запустить её с заданными параметрами и получить значения искомых величин.

Проверка результатов. "Короткий ответ"; "Множественный выбор" (с единственным верным ответом).

3-01

Рис. 3.1. В центре - окно с кодом программы, в правом нижнем углу - демонстрация работы программируемого устройства.

3-02

Рис. 3.2. В центре - схема работы программируемого устройства, в правом нижнем углу - демонстрация работы программируемого устройства.

3-03

Рис. 3.3. Проверочные вопросы к видеоролику.

3-04

Рис. 3.4. Методические материалы по выполнению лабораторной работы.

3-05

Рис. 3.5. Проверка работы

Пример 4

Практическая работа в онлайн-курсе «Культура русской деловой речи».

Адрес работы

Цель работы: Выработать у обучаемых понимания смысловых нюансов терминов и профессионализмов.

Описание. Обучаемые знакомятся с предложенным текстом и делают аналитические выводы.
По окончании выполнения работы обучаемые отвечают на 2 вопроса.

Проверка результатов. "Множественный выбор" (с несколькими верными ответами).

4-01

4-02

Пример 5

Учебное задание в онлайн-курсе «Основы экономической эффективности производства»

Адрес работы

Цель работы: Выработать у обучаемых понимания алгоритма расчёта ряда финансовых показателей.

Описание. Это задача на вычисление с однозначным решением. Обучаемым предложены известные значения ряда финансовых показателей, по которым нужно вычислить два других значения и ответить на вопрос.

Проверка результатов.  Два вопроса типа "Числовой ответ"; один вопрос типа "Множественный выбор" с одним правильным ответом.

5-01

Пример 6

Практическое задание для онлайн-курса «Теория решения изобретательских задач»

Адрес работы

Цель работы: Задание нацелено не столько на проверку знаний обучаемых, сколько на то, чтобы продемонстрировать причины неудач при запуске в производство инновационных продуктов.

Описание. Обучаемым предлагается описание 4-х стартапов и предлагается проанализировать эти проекты на предмет выявления факторов, обусловивших их провал.

Проверка результатов. 4 вопроса типа "Множественный выбор".

6-01

Пример 7

Семинар в онлайн-курсе «Введение в теорию вероятностей».

Адрес работы

Цель работы: Выработка навыков решения комбинаторных вероятностных задач.

Описание. Обучаемому предлагается самостоятельно ознакомиться с разбором 4-х задач в формате видеолекции и текста и выполнить аналитические вычисления. 
Задание не оценивается.

Проверка результатов. Вопросы типов Числовой ответ, Короткий ответ, Множественный выбор.

7-01

Рис. 7.1. Примеры задач.

7-02

Рис. 7.2. Разбор решений в формате видеолекции и текста.

Пример 8

Семинар в онлайн-курсе «Веб-графы и методы работы с ними»

Адрес работы

Цель работы: Выработка навыков решения задач на графах.

Описание. Обучаемому предлагается самостоятельно ознакомиться с видеороликами, в которых разбирается решение нескольких задач на графах. Задание не оценивается.

Проверка результатов. Отсутствует.

8-01

Пример 9

Практическая и самостоятельная работа в онлайн-курсе "Производственный менеджмент"

Адрес работы

Цель работы. Выработка у обучаемых навыков применения математических методов управления проектами при численном решении типовых задач производственного менеджмента.

Описание. Обучаемым предлагается самостоятельно ознакомиться с описанием работы, инструкциями по её выполнению, примерами решений, материалами для самостоятельной работы, а также – ответить на вопросы для самопроверки м выполнить расчёты.

Проверка результатов. Вопросы типа "Числовой ответ" и "Короткий ответ".

9-01

Приведённые примеры не показывают все возможности организации практических и лабораторных работ в онлайн-курсах. Мы выбрали эти примеры, поскольку использованные в них средства доступны преподавателям – авторам онлайн-курсов и не требуют привлечения специалистов в области программирования, компьютерной графики и пр., использования специализированного программного обеспечения.

Организация практических и лабораторных работ при обучении онлайн – один из самых сложных, но в то же время, и самых интересных этапов проектирования онлайн-курсов. Огромное значение здесь принадлежит творческой инициативе самих авторов.