Тестовые оболочки и возможности их использования в обучении (английский язык)

    2.Технология проектирования компьютерных тестов предметной области 

    Экспертами  чаще используется метод нисходящего  проектирования модели знаний (технология “сверху - вниз”). Вначале строится генеральное содержание предметной области с разбивкой на укрупненные модули (разделы). Затем проводится детализация модулей на элементарные подмодули, которые, в свою очередь, наполняются педагогическим содержанием.

    Другой  метод проектирования “снизу - вверх” (от частного к общему) в большинстве случаев реализуется группой экспертов для разработки модели знаний сложной и объемной предметной области или для нескольких, близких по структуре и содержанию, предметных областей.

    Каждый  модуль предполагает входящую информацию, состоящую из набора необходимых  понятий из других модулей и предметных областей, а на выходе создает совокупность новых понятий, знаний, описанных в данном модуле, рис. 1. 

    

    Рис. 1. Структуры линейной модели знаний 

    Модуль  может содержать подмодули. Элементарный подмодуль - неделимый элемент знания - может быть представлен в виде базы данных, базы знаний, информационной модели. Понятия и отношения между ними представляют семантический граф (рис. 2). 
 

 
 

    Рис. 2. Семантический  граф модуля знаний 
 

    Модульное представление знаний помогает 

• организовать  четкую систему контроля с помощью  компьютерного тестирования, поскольку допускает промежуточный контроль (тестирование) каждого модуля, итоговый контроль по всем модулям и их взаимосвязям, а также эффективно использовать методику “черного ящика”;

 

• осуществлять  наполнение каждого модуля педагогическим содержанием;

 

• выявить и  учитывать семантические связи  модулей и их отношения с другими  предметными областями.

 

    Проектирование  модели знаний играет важную роль для образовательного процесса. От этого в конечном счете зависит обучающая среда: учитель с его квалификацией и опытом, средства и технологии обучения, а главное - контроль обучения.

    Модульный принцип построения модели знаний позволяет  использовать принцип исчерпывающего контроля - полный перебор всех тестовых заданий для заданной предметной области, что характерно для итоговых измерений уровня обученности.

    Можно выделить два принципиальных способа  контроля (тестирования) некоторой  системы: 

• метод “белого  ящика” - принцип тестирования экспертной модели знаний;

 

• метод “черного ящика” - тестирование некоторой сложной системы по принципу контроля входных и выходных данных (наиболее подходит к компьютерному тестированию).

 

    Для упрощения дальнейшего изложения  введем ряд определений и понятий.

    Тестирование  - процесс оценки соответствия личностной модели знаний ученика экспертной модели знаний. Главная цель тестирования - обнаружение несоответствия этих моделей (а не измерение уровня знаний), оценка уровня их несоответствия. Тестирование проводится с помощью специальных тестов, состоящих из заданного набора тестовых заданий.

    Тестовое  задание - это четкое и ясное задание по предметной области, требующее однозначного ответа или выполнения определенного алгоритма действий.

    Тест - набор взаимосвязанных тестовых заданий, позволяющих оценить соответствие знаний ученика экспертной модели знаний предметной области. 

    Тестовое  пространство - множество тестовых заданий по всем модулям экспертной модели знаний.

    Класс эквивалентности - множество тестовых заданий, таких, что выполнение учеником одного из них гарантирует выполнение других.

    Полный  тест - подмножество тестового пространства, обеспечивающее объективную оценку соответствия между личностной моделью и экспертной моделью знаний.

    Эффективный тест - оптимальный по объему полный тест.

    Самой сложной задачей эксперта по контролю является задача разработки тестов, которые позволяют максимально объективно оценить уровень соответствия или несоответствия личностной модели знаний ученика и экспертной модели.

    Подбор  тестовых заданий осуществляется экспертами-педагогами методологией “белого ящика”, а их пригодность оценивают с помощью “черного ящика”(рис. 3) 

      
 

    Рис. 3. Схема создания тестовых заданий 

    Самый простой способ составления тестовых заданий - формирование вопросов к понятиям, составляющим узлы семантического графа (рис. 2), разработка упражнений, требующих для их выполнения знания свойств выбранного понятия. Более сложным этапом является разработка тестовых заданий, определяющих отношения между понятиями. Еще более глубокий уровень заданий связан с их подбором, выявляющим связь понятий между отдельными модулями.

    Множество тестовых заданий (тестовое пространство), вообще говоря, согласно принципу исчерпывающего тестирования, может быть бесконечным. Однако в каждом реальном случае существует конечное подмножество тестовых заданий, использование которых позволяет с большой вероятностной точностью оценить соответствие знаний ученика заданным критериям по экспертной модели знаний (полный тест).

    Из  полного теста можно выделить эффективный тест (оптимальный по объему набор тестовых заданий, гарантирующий оценку личностной модели ученика заданным критериям). Выбор эффективного теста зависит от удачного разбиения тестового пространства на классы эквивалентности, пограничные условия, создание тестов на покрытие путей и логических связей между понятиями и модулями.

    В дальнейшем необходим тестовый эксперимент  на группе учащихся, который позволит провести корректировку и доводку  теста до вида эксплуатации (методика “черного ящика”).

    Таким образом, построение компьютерных тестов можно осуществлять по следующим последовательным шагам: 

1. формализация  экспертной целевой модели знаний;

 

2. нисходящее (или снизу - вверх) проектирование тестового  пространства;

 

3. формирование  и наполнение тестовых заданий;

 

4. формирование  полного компьютерного теста;

 

5. тестовый  эксперимент;

 

6. выбор эффективного теста;

 

7. анализ, корректировка  и доводка теста до вида эксплуатации. [11]

 
 
 
 
 
 

    3. Типы компьютерных тестов 

    В соответствии с моделью знаний выделим  три класса компьютерных тестов на знания, умения и навыки. Отметим, что типы компьютерных тестовых заданий определяются способами однозначного распознавания ответных действий тестируемого. 

    1. Типы тестовых заданий по блоку  “знания”: 

• вопросы альтернативные (требуют ответа да - нет);

 

• вопросы с  выбором (выбор одного правильного ответа из списка предложенных,  вопросы с множественным выбором ответов);

 

• вопросы на знание фактов, имеющих формализованную  структуру (в виде информационной модели или схемы знаний);

 

• вопросы, ответы на которые можно контролировать по набору ключевых слов;

 

• вопросы, ответы на которые можно распознавать каким-либо методом однозначно.

 

    2. Типы тестовых заданий по блоку  “навыки” (распознание деятельности: манипуляции с клавиатурой; по  конечному результату): 

• задания на стандартные алгоритмы (альтернативные да - нет, выбор из набора вариантов);

 

• выполнение  действия.

 

    3. Типы тестовых заданий по блоку  “умения”. Те же самые, что  навыки, но использующие нестандартные  алгоритмы и задачи предметной  области при контроле времени их решения: 

• задания на нестандартные алгоритмы (альтернативные да - нет, выбор из набора вариантов);

 

• выполнение  действия.

 

    Выбор типов тестов определяется 

• особенностями инструментальных тестовых программ (тестовыми  оболочками);

 

• особенностями предметной области;

 

• опытом  и мастерством экспертов. [11]

 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

    4. Инструментальные тестовые оболочки 

    Основное  назначение тестовых оболочек заключается  в возможности  самостоятельной  разработке учителями-предметниками, не сведущими в программировании и технологии создания конструкторов, тестов по требуемой им теме, на выявление знаний именно  в той области знаний, которую они изучают.

    Для создания тестов по предметной области  разработаны и разрабатываются  специальные инструментальные программы-оболочки, позволяющие создавать компьютерные тесты путем формирования базы данных из набора тестовых заданий.

    Инструментальные  программы, позволяющие разрабатывать  компьютерные тесты, можно разделить  на два класса: универсальные и специализированные.

    Универсальные программы содержат тестовую оболочку как составную часть. Среди них “Адонис” (Москва), “Linkway” (Microsoft), “Фея” (Томск), “Радуга” (Москва) и т.п.

    Специализированные  тестовые оболочки предназначены лишь для формирования тестов. Это - “Аист” (Москва), “I_now” (Иркутск), “Тест” (Красноярск) и др.

    Для того, чтобы разработать компьютерный вариант теста с помощью одной  из названных выше программ, необходимо уяснить, какие формы тестовых заданий  они допускают. 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

    5. Формы тестовых заданий

    Многие  исследователи разделяют все  тестовые задания на два типа, это: 

1. Задания закрытого  типа

 

•  На соответствие: несколько вопросов и несколько ответов.

 

    Пример: а) Кто автор планетарной модели? 

    б) Кто автор закона тяготения? 

    в) Кто автор поэмы “Мцыри”?  

    а) М.Ю.Лермонтов 

    б) Э.Резерфорд 

    в) И. Ньютон 

• На выявление  правильной последовательности