На сегодняшний день различают следующие виды программ:

Электронный урок – короткая компьютерная программа, посвященная изучению какой-либо минимальной темы, которую в силу малого объема или значимости для практического использования нецелесообразно или невозможно разделить на более мелкие составляющие.

Электронный учебник (ЭУ) – более крупная информационная единица, интегрирующая в себе несколько электронных уроков, обеспечивает достижение тактических целей обучения.

Электронный курс – функционально законченная крупная информационная единица, обеспечивающая достижение стратегических целей обучения.

Исходя из проведенного анализа существующих систем можно выделить следующие группы структур информационных единиц внутри электронного учебника:

Основная характеристика учебника состоит в том, какие цели, насколько, за какое время, при каких затратах, при каких начальных условиях, в каком проценте и распределении случаев будут достигнуты. Все остальные характеристики (тип интерфейса, используемая лексика, реализуемая педагогическая теория и т.п.) являются либо второстепенными, либо подчиненными. Получаемые по этим показателям оценки следует рассматривать как статистические, по мнению авторов это очевидно. Оценка перечисленных параметров тесно связана с понятием степени достижения целей. Объективная оценка степени достижения поставленных целей может быть получена только методом тестирования. Важным вопросом здесь является вопрос точности измерения, поскольку при тестировании (исходя из теории измерения) мы уже неизбежно допускаем ошибку, а при обработке результатов - еще одну. Возникает вопрос, насколько правильными окажутся окончательные выводы вообще.

Для оценки качества электронных учебников мы предлагаем использовать следующие характеристики:

Валидность учебника (valid – способность удовлетворять чему-либо, допустимость). Будем различать

Содержательная валидность – оценивается экспертно и определяет меру соответствия содержимого учебника заявленным целям обучения. В данном случае имеется в виду в большей степени понятие объема знаний заложенного учебника, нежели структура этих знаний, поскольку, структура конкретного учебника строится исходя из конкретной психолого-педагогической теории, и эти теории часто противоречат друг другу.

Очевидная валидность – валидность с точки зрения обучаемого.

Сопоставительная валидность – сравнение с другими учебниками. Поскольку нет двух идентичных учебников, возможно имеет смысл рассматривать эту характеристику через соотношение достижения/затраты.

Надежность – способность учебника показывать одинаково стабильные результаты при применении на нескольких, но примерно одинаковых выборках. Способность учебника мало менять свою стабильность при применении на различных выборках. Стабильность сохранения основных параметров распределения результатов после применения этого учебника на разных группах.

Характеризует затраты на обучение по данному учебнику – временные, материальные, умственные, физические и т.п.

Способность достигать поставленных целей за минимальное число шагов. Характеризуется распределением числа шагов, необходимых для достижения поставленных целей в разных выборках. Избыточность учебника – мера наличия в учебнике такой информации, овладение которой прямо не служит достижению поставленных целей обучения.

Интегрированность учебника — степень его интеграции с другими учебниками.

Практичность учебника. Оценивается экспертно или по затратам времени или по отзывам обучавшихся по критерию знаков.

Связность учебника — статистическая мера связи между уроками в учебнике – насколько они являются независимыми.

В данном случае получим пространственный график – некоторую криволинейную плоскость, ландшафт. Такой ландшафт можно просмотреть и в динамике, например, по группе – чего и в какой мере она достигала за время своего существования.

Для достижения уровня С "вообще" лучше учебник В1, а для хорошего достижения того же уровня лучше учебник В2. Учебник В3 быстро доводит до мин. знаний по уровню С, а до максимальных знаний по тому же уровню ведет долго, а вот учебник В4 – наоборот. По результатам оценки должен формироваться вербальный вывод – данный учебник предназначен для лиц с высокой скоростью усвоения, отличной памятью и т.п.

Такая характеристика как "На кого рассчитан учебник" должна следовать из вида распределения его результатов. Распределение может быть смещено в сторону "сильных" студентов или "слабых", "медленных" или "быстрых", "все помнящих" или "быстро забывающих", так вот вид кривой распределения как раз и должен характеризовать требуемый начальный уровень подготовки. Вообще, делить студентов на “слабых” и “отличников”, имеющих большой и малый объем знаний – не совсем верно. Еще следует учитывать потенциальные возможности и скорости прогресса данного обучаемого. Один и тот же обучаемый в разные моменты времени находится в разном психофизиологическом состоянии и его способности могут различаться значительно. Равное, а может и большее значение имеет не само обладание чем-то, скорость восприятия и возможность восприятия.

Аналогичные характеристики можно сопоставить и каждому из уроков учебника, что позволит производить анализ элементов учебника, а оценка учебника в целом позволяет получить анализ эффективности структуры уже этих самых уроков.

Избыточность – нет ли в уроке чего лишнего, и если есть то какова мера. Избыточность – попытка достичь в уроке несколько разнородных целей, предъявить несколько не связанных единой целью информационных единиц, например, грамматику и страноведческую информацию или наличие материала (картинки, например) вообще без четкой цели.

Избыточность можно оценить через средние характеристики (время внимания и тп).

Избыточная информация – это та, добавление которой уже не приводит к росту оценки по тесту.

Связность – мера связи с другими уроками. Для тестов – это корреляция между результатами некоторых двух заданий. Для учебников, видимо, нечто подобное, т.е влияние одного урока (усвоения) на способность усвоить другой. Для тестов связь между заданиями – это плохо. Для уроков – видимо, исходя из педагогической концепции. Для учебника связность – хорошо, а для справочника – плохо. Связность – корреляция между результатами тестов по этим самым урокам. Связность можно представить матрицей парных корреляций, хотя в общем случае нужен конечно ПФЭ.

В качестве примера рассмотрим алгоритм расчета сопоставительной валидности. Задача выяснения валидности сводится к задаче сравнительного анализа распределений до и после применения учебника на некоторой группе. В случае, если речь идет о нормальном распределении, то надо доказать, что математическое ожидание значимо изменилось. Если распределение другого вида или приняло другой вид после применения, то необходимо попытаться привести его к нормальному (например, логарифмическим преобразованием, либо путем структурных изменений самого учебника на основе анализа вида распределения). Если и это не удается, то необходимо рассчитать ранговую корреляцию, определить вид распределения и интерпретировать его (распределение) вербально. Необходимо учитывать, что оценка учебника в общем случае величина многомерная, поскольку учебник преследует не одну, а сразу несколько целей. В общем случае (чаще всего) результаты применения учебника могут представляться следующими кривыми:

Равномерное распределение – идеальный вариант, который однако не встречается на практике

Нормальное распределение – вариант, чаще всего встречающийся на практике. Вид распределения говорит о том, что учебник рассчитан на среднего студента.

Распределение Пуассона, Распределение Максвелла, Распределение Шарлье – учебник рассчитан на обучаемого, отличающегося от среднего. Например – интенсивный курс, напротив – ознакомительный курс и тп.

Таким образом, в математическом смысле ставится задача статистической проверки нулевой гипотезы, и в случае, если гипотеза будет отвергнута, – оценке степени различия выборок. В различных областях приняты различные методики проверки данной гипотезы. Для большего числа областей уровень ошибки принимается 1% или 5%, в некоторых областях, например, в социологии, используется уровень значимости 50%.

Для сравнительной оценки средних величин в случае нормального распределения применяют t-критерий Стьюдента (Госсета). Для оценки дисперсий используется F-критерий Фишера.

Критерий знаков z

X-критерий Ван-дер_Вардена.

U – критерий Уилкоксона (Манна -Уитни)

T – критерий Уилкоксона

Критерий ХИ-квадрат

Критерий Ястремского J

R = 0, связь между признаками отсутствует

R = +1, полная положительная связь (возрастанию X соответствует возрастание Y)

R = -1, полная отрицательная связь (возрастанию X соответствует убывание Y)

В таблице приведены некоторые часто используемые коэффициенты корреляции.

Параметрические – зависят от характера распределения, в формуле есть характеристики распределения, например, s , и тп. На практике разработаны только для нормального распределения.

Непараметрические – (ранговые-частный случай) – не зависят от закона распределения

СПИСОК ЛИТЕРАТУРЫ