А. В. Осин Открытые образовательные модульные мультимедиа системы


Глава 5 Интегральная оценка качеств электронного учебного модуля



страница7/21
Дата24.11.2016
Размер3.84 Mb.
Просмотров5187
Скачиваний1
1   2   3   4   5   6   7   8   9   10   ...   21
Глава 5

Интегральная оценка качеств электронного учебного модуля

Проблема оценки качества электронных образовательных ресурсов (ЭОР) возникла практически одновременно с появлением первых изданий на CD и ресурсов Интернета. С развитием ЭОР сложность ее решения только повышается: современный интерактивный мультимедийный контент проецирует последние достижения информатики и вычислительной техники на содержание предметной области, образуя инновационные качества электронных образовательных ресурсов.

До настоящего времени задачи оценки качества ЭОР решались исключительно на экспертной основе. Комплексная экспертиза [12, 13, 18] предусматривала трехмерную оценку ЭОР, основанную на технологической, содержательной и дизайн-эргономической экспертизах. Изъяны экспертных оценок широко известны: нечеткость критериев, слабая квалиметрия, неопределенность технологии и в итоге  субъективность эксперта. В то же время понятно, что в значительном количестве случаев экспертная оценка является единственно возможной. Тогда очевидным путем повышения объективности является развитие системы критериев, совершенствование квалиметрии, унификация технологий и процедур.

Создание ЭОР нового поколения придало новый импульс развитию квалиметрии и критериев оценки различных качеств электронного образовательного контента. Значительную роль при этом имело то обстоятельство, что ресурсы нового поколения унифицированы по многим аспектам: от единой функциональной среды до заданной архитектуры электронного учебного модуля (ЭУМ). Прозрачность инновационных качеств ЭОР нового поколения также способствовала развитию квалиметрии и повышению определенности оценки качества.

В результате были разработаны квалиметрия, система критериев, технология и процедура интегральной оценки качеств (ИОК) электронного учебного модуля открытой образовательной модульной мультимедиа системы (ОМС), представленные ниже. Следует отметить, что многие компоненты ИОК не специфицированы для ЭУМ ОМС и с успехом могут использоваться для оценки любого интерактивного образовательного мультимедиа контента.




    1. Концепция интегральной оценки качеств

Возможности электронных образовательных ресурсов нового поколения обеспечивают трансформацию образовательных технологий, основанных на репродуктивной модели обучения, в направлении инновационных технологий активного учения. Инновации характеризуются ростом творческого компонента деятельности преподавателя в аудитории, переходом от вещания к дискуссии, коллективному анализу и совместным исследованиям при полноценной и высокоэффективной самостоятельной работе учащихся вне аудитории.

Современные образовательные технологии реализуют потенциал ЭОР нового поколения в следующих направлениях:



  • обеспечение всех компонентов образовательного процесса;

  • осуществление личностно-ориентированного обучения;

  • развитие активно-деятельностных форм обучения;

  • расширение функционала и кардинальное повышение эффективности

самостоятельной учебной работы.

Наличие в совокупном контенте ЭОР нового поколения трех различных типов модулей: И (информация), П (практические занятия), К (контроль) удовлетворяет запросы по всем основным образовательным компонентам. Кроме того, предусмотренные архитектурой ЭОР вариативы электронных учебных модулей обеспечивают личностно-ориентированный характер обучения, в том числе – для учащихся с особыми возможностями.

Развитие активно-деятельностных форм обучения переходит в практическую плоскость благодаря высокой интерактивности и мультимедийности контента ЭУМ, поддерживаемого моделингом. С учетом вариативности модулей деятельностные, максимально эффективные для обучения формы могут распространяться на любой контингент учащихся.

Наиболее значимые инновации просматриваются в секторе самостоятельной учебной работы. Прежде всего это, как минимум, утроение образовательных возможностей «домашнего задания»: кроме традиционного получения информации ЭУМ позволяют реализовать вне учебной аудитории практические занятия и аттестацию (контроль), которые раньше были возможны только в школе или университете. При этом важно отметить, что активно-деятельностные формы обучения обеспечивают кардинально повышение эффективности учебной работы, так что достижение полноценного функционала самостоятельной учебной деятельности по меньшей мере не увеличивает затрат времени учащегося.

Значительный вклад в инновационное развитие сектора самостоятельной учебной работы с учетом ее личностно-ориентированного характера обеспечивает открытость ЭУМ для внесения пользователем дополнений и изменений, вплоть до полной модернизации модуля. Наконец, эффективному внедрению в учебный процесс способствует кроссплатформенность ЭУМ, работоспособных как в среде MS Windows, так и в среде операционных систем семейства Linux (с 2010 г.).

Модульная структура контента ЭОР нового поколения позволяет построить замкнутый цикл учебного процесса – от выдачи задания до выставления оценки – по безбумажной технологии. Благодаря включению в инструментальный комплекс ОМС Системы учета учебных достижений и унификации данных о результатах работы учащегося с ЭУМ в соответствии с международной спецификацией SCORM RTE, функциональность открытой образовательной модульной мультимедиа системы достигает уровня необходимой полноты.

Таким образом, рассматривая инновационные возможности ЭОР нового поколения с точки зрения отдельно взятого электронного учебного модуля, к инновационным качествам ЭУМ можно отнести:


  • интерактивность,

  • мультимедийность,

  • модифицируемость,

  • кроссплатформенность.

Вторая группа важных качеств ЭУМ – технологическая – тесно связана с первой. Собственно, поэтому оценка качеств модуля и является интегральной. Например, нарушение унифицированной структуры ЭУМ значительно осложнит пользователю внесение изменений, т.е. отрицательно скажется на модифицируемости модуля. Определяющее влияние на модифицируемость и кроссплатформенность ЭУМ оказывают использованные при его создании технологии программирования (программные решения). Ошибки этих решений сказываются также на полнофункциональности или даже на работоспособности ЭУМ в целом.

Существенным параметром ЭУМ является его объем, косвенно характеризующий мультимедийность контента, что, в свою очередь, дает основания предполагать развитость других инновационных качеств модуля. Безусловным требованием к ЭУМ является удовлетворительное качество мультимедиа компонентов, обеспечение которого также влияет на объем модуля. С другой стороны, превышение заданного в Унифицированных требованиях (УТ) максимума повлечет проблемы доставки модуля.

Возможности структурированного хранения, поиска и предварительной оценки ЭУМ необходимого типа и содержания обеспечивают метаданные модуля, разработанные в соответствии с УТ. Контроль заполнения всех необходимых полей, проверка соответствия метаданных и манифеста ЭУМ заданной XML-схеме относится к числу задач оценки технологических качеств электронного учебного модуля.

Таким образом, технологические качества ЭУМ определяются:


  • соответствием УТ объема модуля, его структуры, программных решений и

форматов мультимедиа компонентов;

  • полнотой и безошибочностью метаданных и манифеста, отвечающих профилю хранилища, согласованному с УТ;

  • качеством мультимедиа компонентов контента и программных решений.

Для вариативных ЭУМ в интегральную оценку включается дополнительно специализированный компонент – сравнительный анализ, определяющий новизну представления учебного материала в рассматриваемом модуле по отношению к ранее созданному.

Кроме инновационных и технологических качеств в системе оценки модуля большую роль играет традиционная экспертиза учебного содержания. Минимально необходимым является удовлетворение следующим критериям:



  • соответствие Заданию на выполнение работ;

  • соответствие учебного содержания Государственному стандарту (примерной программе обучения);

  • исчерпывающее представление соответствующего тематического элемента предметной области;

  • методическая эффективность за счет целесообразного использования инновационных качеств;

  • соответствие современным научным представлениям предметной области;

  • соответствие базовым ценностям социума;

  • адекватность результирующих данных.

Следует отметить, что интегральную оценку качеств созданных модулей предваряет экспертиза концепции ЭОР в предметной области, согласование сценарных планов и других документов, положенных в основу разработки. Соответственно, параметры и характеристики модуля, установленные в процессе ИОК как определяющие его инновационные, технологические и содержательные качества, должны быть не хуже заявленных в исходной документации.




    1. Процедура и технологии

Процедура интегральной оценки качеств электронного учебного модуля стартует с момента регистрации ЭУМ, поступившего от разработчика. Чаще всего модуль или группа модулей направляется по глобальной компьютерной сети, однако возможны и другие способы доставки. После регистрации ЭУМ разработчик получает соответствующее подтверждение.

Как следует из концепции, интегральная оценка качеств проводится по весьма обширному перечню параметров, характеризующих инновационные, технологические и содержательные качества ЭУМ. В этих условиях решить задачи ИОК можно только с привлечением специализированных средств автоматизации. Необходима компьютерная программа, которая в автоматическом режиме анализирует структуру, программно-архитектурные решения и компонентный состав контента ЭУМ. Компьютерный анализ дает возможность оценить ряд инновационных и технологических качеств модуля. Для вынесения окончательного суждения по некоторым параметрам компьютерную оценку требуется дополнить экспертной. Дополнительной экспертизы, в частности, требует уровень мультимедийности и категория модифицируемости каждой отдельной сцены, а также окончательная проверка кроссплатформенности модуля.

Ряд качеств ЭУМ можно установить только путем экспертизы функционирующего модуля. Так, исключительно к компетенции эксперта относится определение уровня интерактивности, качества мультимедиа компонентов, а также оценка содержательных качеств ЭУМ.

В таблице 5.1 представлены все подлежащие контролю параметры, характеризующие инновационные, технологические и содержательные качества ЭУМ, с указанием соответствующей технологии оценки. В соответствии с этой таблицей, интегральная оценка качеств электронного учебного модуля разбивается на три этапа. На первом этапе производится автоматический компьютерный анализ структурных составляющих ЭУМ, позволяющий получить предварительную либо окончательную оценку большинства технологических и ряда инновационных качеств.

На втором этапе эксперт − специалист в области информационных технологий проводит функциональную экспертизу модуля. В процессе воспроизведения ЭУМ устанавливаются его функциональные возможности и выявляются ошибки программных решений. Кроме того, динамический режим обеспечивает дополнительную инновационно- технологическую (ИТ) экспертизу для уточнения данных структурного анализа, а также дает возможность оценить инновационные и технологические качества, определяемые только в процессе функционирования ЭУМ.

На третьем этапе эксперт − специалист предметной области оценивает содержательные качества модуля.

Таким образом, в интегральной оценке качеств ЭУМ участвуют, по меньшей мере, два эксперта различных областей знаний. Стоит отметить: опыт проведения ИОК показал, что поручать все экспертные работы одному человеку ни в коем случае нельзя. Напротив, число участников процесса на практике существенно больше. Как правило, одновременно работают две группы ИТ и предметных специалистов, часто – в дистанционном режиме, так что необходима сетевая поддержка согласованной работы всех экспертов, которая
Таблица 5.1.

Сводная таблица ИОК ЭУМ


Наименование


Технологии оценки

Компьютерная

Экспертная

  1. Инновационные качества:

    1. Уровень интерактивности

    2. Уровень мультимедийности:

      1. По каждой сцене

      2. ЭУМ в целом

    3. Категория модифицируемости

    4. Кроссплатформенность

+

+



+

+

+



−/+

+


  1. Технологические качества:

    1. Объем

    2. Архитектура

    3. Программные решения (функциональность)

    4. Качество мультимедиа компонентов

    5. Манифест и метаданные

+

+


+

+

+



+

  1. Содержательные качества:

    1. Соответствие современным научным представлениям предметной области

    2. Соответствие учебного содержания ГОС (программе обучения)

    3. Исчерпывающее представление

тематического элемента

    1. Соответствие базовым ценностям социума

    2. Адекватность результирующих данных

+
+
+


+

+

реализуется отдельной технической группой. Электронная форма результатов ИОК ЭУМ, заполняемая на всех трех этапах процедуры как автоматически, так и различными экспертами, приведена в Приложениях.

Перейдем теперь к порядку и критериям интегральной оценки качеств ЭУМ на каждом процедурном этапе. При этом отметим, что отрицательная оценка какого-либо качества модуля на любом этапе не является основанием для прекращения процедуры ИОК, которая призвана дать максимальную информацию для доработки модуля. Исключением являются только нарушения функциональности ЭУМ, вызванные «фатальными» ошибками в архитектуре или программных решениях модуля. Понятно, что при нарушении функциональности полноценная процедура ИОК невозможна.



    1. Структурный анализ

Исходными данными для автоматического анализа структурных составляющих электронного учебного модуля являются сведения из его сценарного плана:

  • наименование ЭУМ;

  • файловое имя контейнера (идентификатор);

  • тип модуля (И-,П-,К-);

  • разновидность модуля (стандартный, многопользовательский, с присоединенным потоковым контентом);

  • позиционирование в предметном классификаторе;

  • сведения о результирующих данных;

  • заявленные инновационные качества;

  • необходимое при воспроизведении программное окружение.

Эти данные сохраняются и используются затем на всех этапах интегральной оценки качеств. Кроме того, для электронной формы результатов ИОК вводятся данные о разработчике, версии ЭУМ в соответствии с Унифицированными требованиями, дате последнего обновления и дате поступления на ИОК.

Алгоритм проведения компьютерного структурного анализа включает следующие действия:



  • Верификация модуля.

Сравниваются наименование, идентификатор, тип и разновидность анализируемого ЭУМ с исходными данными сценарного плана.

  • Определение информационного объема.

«Взвешивается» ZIP-контейнер. Данные анализируются на предмет определения соответствия Унифицированным требованиям (УТ). Результат заносится в электронную форму ИОК.

  • Распаковка ZIP-контейнера.

Дальнейшие операции направлены на анализ структурных составляющих ЭУМ, поэтому модуль должен быть распакован.

а) Проверяется наличие всех стандартных папок и файлов, а также соответствие их наименований Унифицированным требованиям.

б) Проверяется формальное соответствие Унифицированным требованиям содержимого папок:

− SCRIPT: папка должна содержать JavaScript/XML-файлы с расширением .xml, включающие текст JavaScript с корневым тегом , или JavaScript-файлы с расширением .js;


  • DATA/scene: папка должна содержать только XML-файлы с расширением .xml;

  • DATA/components: папка должна содержать только файлы мультимедиа компонентов в допустимых форматах. Форматы определяются по расширениям имен файлов, так что предпочтительно использование расширений, рекомендуемых УТ;

  • DATA/skin: папка должна содержать только файлы мультимедиа компонентов допустимых форматов и XML-файлы;

  • MODELERS: возможны три варианта:

  • папка может быть пустой;

  • если для данного модуля заявлена категория модифицируемости «частично открытый», папка должна содержать фрагмент компьютерного сценария, выполненный по технологиям сторонних производителей (например, для Flash – файл с расширением .swf);

  • если заявлен IV уровень интерактивности, папка должна содержать моделеры в JavaScript/XML-файлах с расширением .xml или .js, либо моделеры, разработанные по технологиям сторонних производителей (например, размещенные в файлах с расширением .swf).

Если на всех этапах анализа архитектуры ЭУМ результаты положительны, в электронную форму ИОК заносится отметка о соответствии архитектуры модуля Унифицированным требованиям. Кроме того, выносится предварительная положительная оценка кроссплатформенности и модифицируемости ЭУМ. При отсутствии АКП сторонних производителей (программное окружение не требуется) модуль считается открытым и оценка модифицируемости − окончательной.

Если компьютерный анализ обнаружил нарушения архитектуры ЭУМ:

− отсутствие или нестандартное наименование какой-либо папки;

− недопустимый формат мультимедиа компонента;

− недопустимое программное решение (например, имеются исполняемые файлы с расширением имен .exe или .dll;

− неверное размещение моделеров или фрагментов scenario, выполненных по технологиям сторонних производителей;

архитектура модуля оценивается как не отвечающая Унифицированным требованиям. Вместе с отрицательной оценкой в электронной форме ИОК конкретизируется нарушение.


  • Дополнительный анализ содержимого папки DATA/components.

Расширения имен файлов, содержащихся в папке, сопоставляются с таблицей мультимедиа компонентов (см. табл. 4.1). В результате в электронную форму ИОК заносится значение уровня мультимедийности ЭУМ.

  • Анализ манифеста и метаданных.

В автоматическом режиме проверяется заполнение всех обязательных полей, правильность использования словарей, идентификаторов, предметного классификатора. Результат отражается в электронной форме ИОК как соответствующий или не соответствующий УТ с указанием ошибок.

На этом компьютерный анализ ЭУМ заканчивается, модуль поступает в распоряжение специалиста в области информационных технологий для проведения функциональной экспертизы инновационных и технологических качеств.




    1. Функциональная экспертиза

Основной целью функциональной экспертизы является анализ работоспособности ЭУМ, проверка четкого выполнения всех заявленных функций. Кроме того, при воспроизведении модуля завершается экспертиза его инновационных и технологических качеств: уточняются предварительные оценки структурного анализа и выносятся оценки по ИТ-качествам, определяемым только в процессе функционирования ЭУМ.

Функциональную среду электронного учебного модуля составляет «ОМС-клиент» версии 2.0, включающий кроссплатформенные ОМС-плеер и органайзер, а также (при необходимости) – программное окружение сторонних производителей.

Рассматривается каждая мультимедиа сцена ЭУМ, выявляется неработоспособность (или ошибочная работа) тех или иных мизансцен, мультимедиа композиций, учебных объектов/процессов, медиаэлементов, медиакомбинаций, элементов навигации, манипуляторов и др. Определяются ошибки организации интерактива – отсутствие или неверная реакция объекта/процесса, неадекватные предложения/сообщения, ошибки размещения объектов и т.д.

Нарушение функциональности ЭУМ, ошибка на любом уровне – от модуля в целом до медиаэлемента – недопустимы. Обнаружение ошибки функционирования является основанием для прекращения процедуры ИОК, модуль возвращается на доработку.

Оценка функциональности ЭУМ отражается в электронной форме ИОК в графе «Программные решения (функциональность)». В полнофункциональном модуле экспертным путем устанавливается также:


  • уровень интерактивности ЭУ,

  • уровень мультимедийности каждой сцены,

  • качество мультимедиа компонентов.

Оценка инновационных качеств осуществляется по критериям и квалиметрии Унифицированных требований. Качество мультимедиа компонентов определяется субъективно.

Заметим, что после определения уровня мультимедийности каждой учебной сцены, оценка уровня мультимедийности модуля, полученная на этапе структурного анализа, может измениться. Это произойдет, если не все представленные в папке DATA/components мультимедиа компоненты будут «замечены» в функционирующем модуле. Кроме того, оценка может измениться на отрицательную, если будет обнаружена сцена с уровнем мультимедийности, равным единице. Таким образом, еще одно предназначение функциональной экспертизы – уточнение некоторых оценок компьютерного структурного анализа.

Кроме уровня мультимедийности, функциональная экспертиза «де-факто» дает окончательную оценку кроссплатформенности. Безупречное функционирование модуля, воспроизводимого кроссплатформенным ОМС-плеером, позволяет убедиться в отсутствии платформенно-ориентированных программных решений, скрытых от структурного анализа. Однако, ввиду существенных различий квалификации и технологической культуры разработчиков, этого может оказаться недостаточно. Для принятия окончательного решения следует непосредственно убедиться в функциональности ЭУМ, воспроизводимого в среде альтернативной операционной системы.

Контроль оригинальных записей в метаданных (описание ЭУМ, его характеристики, авторские права, ключевые слова и др.) – также возлагается на эксперта. Результаты экспертного контроля вместе с данными автоматического анализа позволяют дать окончательную оценку качества метаданных ЭУМ.

Если при воспроизведении модуля используется программное окружение (плееры сторонних производителей), на этапе функциональной экспертизы возникает отдельная задача оценки категории модифицируемости. Для ее решения, в соответствии с УТ, нужно проанализировать каждую учебную сцену ЭУМ на предмет использования в компьютерном сценарии фрагментов, разработанных по технологиям сторонних производителей.

С этой целью модуль запускается на воспроизведение специализированным ОМС-плеером, позволяющим исключать из операционной среды программное окружение. Такой режим воспроизведения нарушает функциональность фрагментов контента, подчиненных закрытым (компилированным) компонентам компьютерного сценария. По нарушениям порядка воспроизведения, отказам в реакциях на действия пользователя, разрушению композиций и т.п. нетрудно, исходя из УТ, оценить категорию модифицируемости сцены.

Если сцена потеряла те или иные свои функциональные возможности, она определяется как закрытая для модификаций. Сцена, функциональность которой при воспроизведении специализированным плеером не нарушается, считается открытой. При этом потеря отдельного мультимедиа компонента (например, Flash-анимации) не влияет на положительную оценку модифицируемости сцены.

Подведение итогов анализа всех сцен позволяет, в соответствии с Унифицированными требованиями, дать оценку категории модифицируемости ЭУМ в целом.




    1. Экспертиза содержательных качеств

Многолетний опыт проведения экспертизы электронных образовательных ресурсов показал, что оценка учебного содержания, образовательной эффективности мультимедиа продукта – наиболее субъективная и уязвимая для критики часть экспертного заключения. Одни эксперты требовали дословного совпадения с текстом учебника, другие вместо анализа учебного содержания сосредотачивались на технологических решениях, третьи и вовсе фантазировали по мотивам популярного фильма «Матрица». Но даже если удавалось ухватить существо вопроса, заключения представителей разных педагогических школ могли быть диаметрально противоположными. Особенно запомнилось автору заключение специалистов из одного уважаемого университета: «Виртуальная лаборатория по химии настолько натуралистична, что может представлять серьезную угрозу учебному процессу».

Современный этап развития электронного образовательного контента характеризуется существенным продвижением в формализации критериев оценки, квалиметрии инновационных и технологических качеств ЭОР. Возникло понимание вклада этих качеств в образовательную ценность продукта. Однако наметившийся переход от чтения символьных описаний к непосредственному изучению объектов и процессов предметной области пока еще недостаточно оценен большинством практикующих преподавателей.

В этих условиях экспертиза содержательных качеств ЭУМ должна использовать систему «прозрачных» критериев с минимальными возможностями трактовки. В то же время, мы говорим о педагогике, которая в значительной мере – искусство и, как всякое искусство, она неотделима от творца, проще говоря – субъективна. Выходом в такой ситуации может быть только намеренный отказ от очевидно дискуссионных формулировок критериев оценки.

В рамках экспертизы содержательных качеств электронного учебного модуля специалист предметной области должен дать оценку контенту ЭУМ, исходя из следующих критериев:



  • Соответствие современным научным представлениям предметной области.

Очевидно недопустимыми являются лженаучные сведения, равно как и устаревшие представления о сути и свойствах изучаемых объектов, процессов, явлений.

  • Соответствие учебного содержания Государственному образовательному стандарту (примерной программе обучения).

Вполне прозрачный критерий: предметные знания выходят далеко за рамки ГОС, однако стандарты для того и создаются, чтобы им следовать.

  • Исчерпывающее представление тематического элемента;

Здесь можно ожидать ошибок разного рода. Наиболее распространенная – неверное определение тематического элемента: его формулировка настолько обширна, что уместить все необходимое в одном относительно небольшом модуле попросту невозможно. Иногда подобное несоответствие обнаруживается поздновато. Проблема возникает, когда в модуль И-типа самыми простыми текстрографическими средствами загружается содержание целого тематического блока ГОС, а рассматриваемый в данный момент П- или К-модуль не способен вместить необходимый аудиовизуальный контент, представляющий все описанные в И-модуле объекты, процессы, явления.

С другой стороны, в соответствии с Унифицированными требованиями недопустим вариант, когда контент ЭУМ скуден по образовательному содержанию и занимает при этом информационный объем на порядок меньше допустимого. В этом случае очевидны недоработки либо в определении содержательных границ тематического элемента, либо в реализации собственно контента, не раскрывающего в достаточной мере формулировку тематического элемента. Нарушение УТ автоматически ведет к отрицательной оценке содержательных качеств ЭУМ.

Третий типичный случай – одно из выражений субъективности экспертизы, недооценка трехмерности совокупного контента ОМС (см. рис. 2.4). При достаточно большом информационном объеме рассматриваемого модуля замечание чрезмерно требовательного эксперта формулируется, например, в виде: «решения вычислительной задачи недостаточно, нужен еще лабораторный эксперимент». На самом деле, для раскрытия материала данного тематического элемента – минимально, но достаточно. А виртуальная лаборатория может быть реализована впоследствии как вариативный ЭУМ.


  • Методическая эффективность за счет целесообразного использования инновационных качеств;

Формальное использование новых педагогических инструментов – интерактива, мультимедиа, моделинга, коммуникативности и производительности пользователя отнюдь не гарантирует целесообразность применения ЭУМ в учебном процессе. Одной из задач содержательной экспертизы является оценка возможностей повышения эффективности самостоятельной образовательной деятельности за счет применения активно-деятельностных методов, получения иных методических преимуществ при использовании данного ЭУМ.

  • Соответствие базовым ценностям социума;

Понятно, что пропаганда насилия и жестокости, скрытая реклама алкоголизма и наркомании, брань и нелитературные выражения, все то, что отторгается цивилизованным обществом, в контенте ЭУМ недопустимо.

  • Адекватность результирующих данных;

В процессе функционирования каждого модуля генерируются значения параметров, характеризующих результаты работы пользователя с ЭУМ. В соответствии с международной спецификацией SCORM RTE эти параметры должны иметь определенный формат и отражать самые разные аспекты образовательного процесса − от времени сеанса до количества ошибок и успешных действий. Появление этих данных в органайзере по окончании сеанса работы с ЭУМ свидетельствует о формальном соответствии SCORM RTE. Однако эксперту следует убедиться, что значения результирующих данных адекватны проведенной с модулем работе. Самым простым примером служит поверхностное ознакомление с И-модулем или значительное число ошибок при аттестации с помощью модуля К-типа. Значения результирующих SCORM-параметров должны отразить в этом случае невысокие учебные достижения.

Если рассматриваемый ЭУМ представляет собой вариатив уже существующего модуля, на этапе экспертизы содержательных качеств необходимо дополнительно провести сравнительный анализ вариативов.

Унифицированными требованиями определены возможные варианты решения задач личностно-ориентированного обучения в открытой образовательной модульной мультимедиа системе. Исходя из УТ, следует различать вариативы, размещаемые в Центральном хранилище, подготовленные профессиональными разработчиками, и модули, модифицированные пользователями под собственные запросы.

Как следует из Унифицированных требований, контент вариативов должен отличаться мультимедиа компонентами, компоновкой сцен, формами взаимодействия пользователя с контентом. Эти квалиметрируемые различия контента двух модулей должны быть оценены экспертом не менее, чем в 70%. Понятно, что эксперт-предметник при сравнении будет прежде всего отталкиваться от представляемых объектов/процессов предметной области, характера учебной работы, способов достижения учебной цели. Тем не менее, в процессе сравнительного анализа необходима формализация отличий по указанным в УТ параметрам с приведением численной оценки.

Например, модули, модифицированные пользователями, в большинстве случаев вряд ли можно оценить как полноценные вариативы. Модернизировать более двух третей контента рядовому пользователю нецелесообразно, да и не по силам. Мы же исходим из того, что интегральной оценке качеств подвергаются ЭУМ профессиональной разработки для Центрального хранилища. Соответственно, при создании вариативов частные решения, в которых просматривается принцип вложенности, нельзя признать корректными.


    1. Подведение итогов

Прежде всего следует отметить, что на всех этапах интегральной оценки качеств электронного учебного модуля к используемым критериям оценок могут быть добавлены требования Задания на выполнение работ − неотъемлемой части контракта с компанией-разработчиком. Заказчик вправе повысить планку Унифицированных требований или отменить некоторые из них. Возможно также определение дополнительных требований. Однако Задание на выполнение работ ни в коем случае не может противоречить Унифицированным требованиям к электронным учебным модулям открытых образовательных модульных мультимедиа систем.

По завершении всех трех этапов ИОК полностью заполненная электронная форма рассматривается на совещании руководителей экспертных групп. Составляется окончательное заключение, которое вместе с электронной формой оценки направляется компании-разработчику.

Совещание руководителей экспертных групп рассматривает также вопросы повышения эффективности и точности оценки ЭУМ. В частности, возможно появление «непрофильных» замечаний у эксперта определенной группы. Например, при экспертизе учебного содержания модуля были замечены опечатки и грамматические ошибки в тексте, что, вообще говоря, входит в компетенцию ИТ-экспертов, оценивающих качество мультимедиа компонентов.

Возможны следующие варианты заключения:

− ЭУМ соответствует УТ, отвечает всем критериям интегральной оценки качеств и будет размещен в хранилище;

− ЭУМ может быть размещен в хранилище после согласования с разработчиком изменений в метаданных (например, некоторые оценки инновационных качеств модуля у разработчика и экспертов не совпали);

− ЭУМ не отвечает критериям ИОК и возвращается на доработку (прилагаемый электронный документ определяет перечень доработок).

В последних двух случаях у разработчика имеется определенный срок для согласований, уточнений, аргументированного предложения об изменении заключения. Однако в любом случае следует признать, что заключение с перечнем необходимых доработок – это значительная помощь разработчику и, в конечном итоге, − эффективная защита интересов пользователей.




Поделитесь с Вашими друзьями:
1   2   3   4   5   6   7   8   9   10   ...   21


База данных защищена авторским правом ©nethash.ru 2019
обратиться к администрации

войти | регистрация
    Главная страница


загрузить материал