Роль стандартов метаданных и рубрик качества в обучающих

процессахВалерий Платонов, Исполнительный директор АНОО «ВУНТ» при институтах РАН, Инженер по научному образованию Дирекции по развитию НИТУ МИСиС

Презентация для Всероссийского практического форума «Образование 2016», 16 марта 2016 г.

Стандарт метаданных курса – стандарт интерфейса для размещения информации на агрегаторе курсов

Сравнение поиска на платформах

Маркетплейс vs Агрегатор vs Интегратор

Термин Определение Специфика

Маркетплейс экономическая система, сайт, площадка, на которой различные компании конкурируют друг с другом за продажи своего продукта, товаров, сервисов.

сервисы, удобные для совершения сделок между провайдерами и покупателями (коммуникации, маркетинг, платежи, сертификацию и т.п.).

Агрегатор сайт, компания, которая собирает специфическую информацию, данные о продуктах от разных провайдеров для удобства потребителей.

обычно использует стандарты метаданных и рубрики качества о продукте.

Интегратор компания, которая собирает отдельные продукты или элементы продуктов (процессов, сервисов), возможно, от разных провайдеров с целью формирования системы, учитывающей цели, задачи и потребности заказчика

обычно создаёт рекомендательные сервисы

Примеры маркетплейсов, агрегаторов• https://www.coursehero.com/ • https://www.skillshare.com/ • edu.hh.ru • http://universiality.com/• https://www.zeduki.com/• https://www.kursoteka.ru/catalog• http://courseon.org/• http://eclass.cc/• http://magistratura.su/• http://edumarket.ru/• https://coursmos.com/• https://www.verbling.com/• http://www.hotcourses.ru/ • https://www.class-central.com/• https://www.coursetalk.com/ • https://www.noodle.com/• https://www.coursebuffet.com/

Метаданные

• структурированные данные, предназначенные для описания характеристик образовательных ресурсов (ЭУМК, ЭОР, объектов контента).

К чему могут быть применены стандарты метаданных в образовании?

Категории Примеры Применяемые стандарты

Институциональные 

Образовательные организацииПлатформы, БиблиотекиНаучные организацииЭксперты, КонсультантыПроизводители, поставщики - провайдерыСтартапы, венчурные и инвестиционные компанииРепетиторы, тьюторы

 

Образовательные продукты

Контент, Инструменты, Сервисы  

Образовательные ресурсы

Книги, учебные планы, пособия, видео, youtube  LOM, Dublin Core, LRMI

Обучающие процессы 

программы, специализации, курсы, уроки, вопросы, вебинары, школы, практика, стажировки

ФГОС

Маркетинговые 

Экспозиции, выставки, мероприятия, конкурсы  

Сопутствующие услуги

Финансовые, Юридические, Проживание, Трудоустройство

 

Ресурс vs ПроцессОбразовательный Ресурс Образовательный процессПо запросу Имеет дату начала и завершение

курсаСамостоятельное обучение Присутствие преподавателя,

тьютора, наставника Асинхронное Асинхронное, Наличие синхронного

вида обучения

Структура процесса обучения

Образовательная программа

Онлайн курс

Урок

Вопрос

Специализация

Выбор курса

Информация о курсе – агрегатор на основе метаданных

Предпочтение тому или иному курсу -

рекомендательные системы на основе рубрик качества

Внутреннее и внешнее измерение

Вид измерения внутреннее измерение – formative

внешнее оценивание –summative

Характер данных объективная информация, проверяемая

Субъективная, экспертная

Поставщик данных Провайдер сторонние эксперты (учащиеся, заказчиков, консультанты, производители, работодатели и т.д.)

Проблема поиска курсов, программ, видео и т.д.

Увеличивающееся количество обучающих объектов, множество показателей

• Провайдеры • платформы• дисциплины• образовательные технологии,

педагогики• цена…

Проблема выбора курсов, программ, видео и т.д.

Как выбрать подходящий курс?Machine LearningPedro Domingos, University of WashingtonCoursera

Machine LearningAndrew Ng, Associate Professor, Stanford UniversityCoursera

Machine LearningRohit Singh(Teaching Assistant), MIT OpenCourseWare

Проблема построения персональной траектории

обучения из элементов

Описание полей базы метаданных по онлайн курсам для внутреннего измерения

Категории:• Паспорт курса• Учебный план• Описание доступа• Описание образовательной технологии• Описание планируемых результатов• Описание администрирования

Характеристики стандарта метаданных

• открытый стандарт метаданных курса, программ, видео и т.п.

• обязательный минимум – желательный максимум (недостаточность тэгов для качественного отбора)

• совместимость с другими открытыми стандартами (пересечение полей).

• программные приложения для использования базы метаданных другими участниками.

Стандарт метаданных ОК vs. SCORM

• СМОК - сборник спецификаций и требований по представлению информации об ОК, позволяет обеспечить совместимость баз метаданных об онлайн курсах от разных провайдеров.

• SCORM сборник спецификаций и стандартов (требований) по организации учебного материала и всей системы дистанционного обучения, позволяет обеспечить совместимость компонентов и возможность их многократного использования.

СМОК vs СМОО - (LOMS - стандарт метаданных обучающих (учебных) объектов)

СМОК СМОО (IEEE и IMS)

Стандарт метаданных для описания онлайн курсов

стандарт метаданных для описания образовательных объектов

Онлайн Курс - законченная единица образовательной программы обычно по одной теме (предмету), имеющая определенную продолжительность (например семестр), для которого не требуется очное присутствие преподавателя.

Учебные Объекты определены как любые категории (целостности), которые могут быть использованы для обучения, образования и тренинга(образовательные ресурсы).

определяет категории и состав МОК. определяет синтаксис и семантику признаков МОО.

Цель СМОК – облегчить поиск и выбор ОК для решения задач учащихся, пользователей, заказчиков, консультантов, агентов, потребителей, работодателей

Цель СМОО - поддержать возможность многократного использования ОО, чтобы добавить понятности и облегчить их совместимость обычно в контексте систем управления дистанционным обучением (LMS), поиск

Цель создания стандарта

• Облегчить поиск и выбор курса разными целевыми группами

• Помощь в построении индивидуальной траектории обучения

• Основа множественной модели качества курса – персонализация рейтинга на основании оценок учащихся, заказчиков, преподавателей, дизайнеров, создателей, работодателей, агентов, консультантов

Решаемые задачиРазработка стандарта метаданных ОК позволит:• Облегчить поиск и выбор ОК в зависимости от целей

и задач разных целевых групп (учащиеся, заказчики, работодатели);

• Решить задачи : повышение гибкости маршрута и персонализации обучения;

• Создать сообщества провайдеров ОК на основе соглашений по разработке оценки качества ОК;

• Разработать программные приложения для использования базы метаданных ОК другими участниками.

Качество

Три аспекта качества

1. На основе стандартов – выполнение определенного минимума требований

2. На основе удовлетворения потребительского спроса – конкурентный

3. На основе создания новых качеств

Определения качества в ISO

• Качество объекта через сравнение набора из его характеристик с рядом требований.

• Если те характеристики отвечают всем требованиям, то достигается высокое или превосходное качество,

• Если те характеристики не отвечают всем требованиям, то достигнут низкий или плохой уровень качества.

Понятие качества в Бизнесе• через удовлетворение потребностям

клиента • относится к восприятию степени, до

которой продукт или обслуживание оправдывают надежды клиента.

• нет определенного значения, если не связано с определенной функцией и/или объектом.

• перцепционный, условный и несколько субъективный признак.

Определение качества в ФЗ "Об образовании в РФ", Ст. 2, п.29

• в определенной степени консервативны и имеют отставание от быстро меняющихся потребностей и от прогресса в развитии общества

комплексная характеристика образовательной деятельности и подготовки обучающегося, выражающая степень их соответствия федеральным государственным образовательным стандартам, образовательным стандартам, федеральным государственным требованиям и (или) потребностям физического или юридического лица, в интересах которого осуществляется образовательная деятельность, в том числе степень достижения планируемых результатов образовательной программы

Как измерять качество обучения?

• во внеформальном образовании• в исследовательском образовании• в коннективистском подходе • когда мы не знаем, какой результат мы

получим по завершению такого процесса

Понятие качества для внеформального обучения

вид превосходства над любыми известными характеристиками и даже приводящее к возникновению новых, до этого неизвестных характеристик

Обзор подходов к оцениванию качества курсов

• Оценивание качества менеджмента• Институциональное оценивание

качества онлайн обучающего процесса• Программное оценивание• Технологическое оценивание• Объектное оценивание качества курсов

как ресурсов и процессов

Тенденции в оценивании качества образования

Полноценные образовательные программы

Распакованное образование (курсы, уроки, вопросы, микродипломы)

Институциональное оценивание качества

Объектное оценивание качества

Стандарты ISO/IEC• ISO/IEC 19796-2 Information Technology for

Learning, Education and Training - ITLET – Quality Management, Assurance, and Metrics – Part 2: Quality Model

• ISO/IEC 19796-4 Information Technology for Learning, Education and Training - ITLET – Quality Management, Assurance, and Metrics – Part 4: Best Practice and Implementation Guide

• ISO/IEC 19796-5 Information Technology for Learning, Education and Training - ITLET – Quality Management, Assurance, and Metrics – Part 5: Guide “How to use ISO/IEC 19796-1”

Институциональное оценивание качества обучения

• ACODE (Australasian Council on Open, Distance and E-Learning) – Австралия

• EFQUEL (UNIQUe –европейские университеты) - Европейский фонд по обеспечению качества электронного образования

• DEAC Distance Education Accrediting Commission - США • EADTU European Association of Distance Teaching Universities (E-

xcellence ) – ЕC• eMM (E-Learning Maturity Model) – Новая Зеландия, Австралия,

Великобритания• Pick&Mix – Великобритания (объединяет методики MIT90,

APQC, Quality On The Line, ACODE, eMM)• Мониторинг электронного обучения Министерством

образования - РФ

Объектное оценивание качества онлайн курсов

• QM QualityMattershttps://www.qualitymatters.org/• eLearning Rubric

http://rubric.ecampusalberta.ca• ECBCheck quality criteria http://www.ecb-check.net/ InWent – Capacity Building

International, Germany and the European Foundation for Quality in E-Learning (EFQUEL)

Виды оценивания качества по субъектности оценщика

• оценка качества контента, который могут оценивать только специалисты в теме (иногда их в соответствующей отрасли единицы),

• внутреннее оценивания по стандартизованным критерям

• Внешнее стандартизованное оценивание сторонней организацией

• Интегральная оценка курса (контента+ инструментов) потребителем или заказчиком онлайн обучения.

• Персонализированная (множественная) модель качества курса, которая может не совпадать с предыдущими.

Оценивание качества по уровням образования

• Дошкольное образование ?• Общее образование Inacol, QM• Высшее образование QM, eLearning

Rubric • Постдипломное, пожизненное,

дополнительное образование QM

Стандарты Рубрики Quality MattersTM

Пятое издание, 2014 с присвоенными значениями оценок, 8 категорий в рубрике

1. Обзор курса и введение2. Обучающие цели (компетенции)3. Оценивание и измерение4. Учебные материалы5. Деятельность на курсе и взаимодействие учащегося6. Технология курса7. Поддержка учащегося8. Доступность и юзабилити

Стандарты Рубрики ECBCheck Criteria

1. information about the programmea) general description, objectives and programme organisationb) organisational and technical requirements

2. target group orientation3. quality of the content4. programme/course design

a) learning design and methodologyb) motivation/participationc) learning materialsd) e-Tutoringe) collaborative learningf) assignments and learning progressg) assessment and tests

5. media design6. technology7. evaluation & review

Penn State Quality Assurance e-Learning Design Standards

1. Navigation2. Student Orientation3. Syllabus4. Instructor Response and Availability5. Course Resource Requirements6. Technical Support7. Accessibility Requirements8. Learning Objectives9. Learning Activities and Assessment10.Copyright Requirements11.Course Functionality12.Student Input for Course Improvements

https://weblearning.psu.edu/resources/penn-state-online-resources/qualityassurance/

Сравнение рубрик стандартов в высшем образовании

QM1. Обзор курса и введение2. Обучающие цели

(компетенции)3. Оценивание и измерение4. Учебные материалы5. Деятельность на курсе и

взаимодействие учащегося

6. Технология курса7. Поддержка учащегося8. Доступность и юзабилити

EQS1. Веб-стандарты2. Стандарты информации о курсе3. Стандарты ресурса4. Организационные стандарты5. Стандарты педагогики6. Технологические стандарты

Сравнение рубрик стандартов в школьном образовании

QM K-12 Secondary Rubric – 9 General Standards

1. Обзор курса и введение2. Изучение целей

(компетенции)3. Оценка и измерение4 Учебные материалы5: Взаимодействие и

вовлечения ученика 6: Технология курса7: Поддержка ученика и

преподавателя8: Доступность9: Стандарты соблюдения

требований норм и законов

National Standards for Quality Online Courses K-12 1. Институциональные стандарты 2. Стандарты Преподавания и Изучения 3. Стандарты поддержки4. Стандарты оценивания

Категории рубрики качества ООК на EdCrunch Award

1. Обзорная и вводная часть курса2. Обучающие цели, компетенции3. Оценивание и измерение на курсе4. Учебные материалы5. Обучающая деятельность на курсе и взаимодействие с учащимися.6. Технология курса7. Поддержка учащегося, администрирование8. Доступность и юзабилити, дизайн9. Маркетинг курса10. Механизмы оценивания качества курса11. Критерии качества, которые выходят за рамки приведенных

Эксперты, как их отбиратьКатегории экспертов Категории рубрик качества

для экспертовПродюсеры, создатели курсов

Авторы контентаДизайнерыПед дизайнерыПреподавателиТьюторыАдминистраторыСпециалисты в предметной области, ученые по тематикеУчащиесяПотребители – работодатели, университеты, кадровые агентства

Заказчики (чиновники, общественные организации)МаркетологиМедиа

КонтактыВалерий Платонов Tel. +7(499)5038778, 5038787, +7(910)4687936email: platonov.valeriy@gmail.comhttps://www.facebook.com/groups/CourseQuality/

https://www.facebook.com/valeriy.platonov

@valeriy_platon https://plus.google.com/u/0/+ValeriyPlatonov/

http://ru.linkedin.com/pub/valeriy-platonov/26/14a/a13/