Системы информационных технологий в легкой промышленности

– Фасет (грани одного явления, предмета).

Этот прием позволяет создавать несколько вариантов в одном задании. Все

элементы фасета должны принадлежать к одной дидактической единице. Этот прием широко используется для создания тестовых заданий в целях самоконтроля.

Например:

Исполнение федерального бюджета возложено на:

1) органы федерального  казначейства:

2) финансовые органы;

3) органы регионального  казначейства.

– Импликация, т.е. задания представляются в логической форме условной

связи, т.е. имеют логическую форму суждения «Если… то». Этот прием широко используется для установления причинно-следственных связей.

Например: Если в процессе исполнения бюджета происходит снижение

объема поступлений доходов, то вводится режим:

1)сокращения расходов;

2)блокировки расходов;

3)финансирования расходов  путем зачета денежных средств.

– Краткость, т.е. содержание задания формулируется как можно короче и

яснее. В нем не должно быть лишних слов и знаков, тем самым добиваются

максимальной ясности смысла задания.

Например: Федеральный бюджет 2008 г.

1) дефицитен;

2) профицитен;

3) сбалансирован.

Рекомендации к заданиям с выбором ответа

1. В тексте задания  должна быть устранена всякая  двусмысленность или неясность  формулировок;

2. Основная часть задания  формулируется очень кратко, не  более одного предложения из  семи-восьми слов;

3. Задание должно иметь  предельно простую синтаксическую  конструкцию;

4. В основную часть  задания включается как можно  больше слов, оставляя для ответа 2 – 3 ключевых слова для данной  проблемы;

5. Все ответы к одному  заданию должны быть примерно  одной длины, либо в некоторых  заданиях правильный ответ может  быть короче других;

6. Из текста должны  быть исключены все ассоциации, способствующие выбору правильного  ответа с помощью догадки;

7. Частота выбора одного  и того же номера места для  правильного ответа в различных  заданиях должна быть примерно  одинакова;

8. Основная часть задания  должна быть освобождена от  всякого иррелевантного для данной проблемы материала;

9. Из ответов исключаются  все повторяющиеся слова за  счет ввода их в основной  текст заданий;

10. В ответах не рекомендуется  использовать слова «все», «ни  одного», «никогда», «всегда», «ни один  из перечисленных», «все перечисленные», т.к. в отдельных случаях они  способствуют угадыванию правильного  ответа;

11. Из числа неправильных должны исключаться ответы, вытекающие один из другого;

12. Из числа тестовых должны исключаться задания, содержащие оценочные суждения или мнения испытуемого по какому-либо вопросу;

13. Все варианты ответов  должны быть равновероятно привлекательны  для испытуемых;

14. Ни один из вариантов  ответов не должен являться  частично правильным, превращающимся  при определенных дополнительных  условиях в правильный;

15. Основная часть задания  формулируется в форме утверждения, которое обращается в истинное  или ложное высказывание после  подстановки ответов;

16. Ответ на одно задание  не должен служить ключом к  правильным ответам на другие  задания теста, т.е. не следует  использовать дистракторы из одного задания в качестве ответов к другим заданиям теста;

17. Если задание содержит  среди прочих альтернативные  ответы, не следует сразу после  правильного приводить альтернативный  ответ, так как внимание отвечающего  обычно сосредотачивается только  на этих двух ответах;

18. Все ответы должны  быть параллельны по конструкции  и грамматически согласованы  с основной частью задания  теста.

3. Ответы к заданию. В содержательной части и в ответах необходимо исключить слова «большой, небольшой, много, мало, меньше, больше, часто, всегда, редко, никогда и т.п.».

Все варианты ответов должны быть грамотно согласованы с содержательной частью задания, однообразны по содержанию и структуре, равнопривлекательны. Между ответами необходимы четкие различия. Правильный ответ однозначен и не должен опираться на подсказки.

Среди ответов должны отсутствовать ответы, вытекающие один из другого.

В варианты ответов нельзя включать формулировки «все перечисленное выше», «все утверждения верны», «перечисленные ответы не верны», так как такие ответы нарушают логическую конструкцию тестового задания или несут подсказку.

Формы заданий определяют основные требования к формулировке ответов:

1). Задания с выбором  одного или нескольких правильных  ответов 

Задания первой формы имеют три варианта ответа:

а) выбор одного правильного ответа;

б) выбор наиболее правильного (полного) ответа;

в) выбор нескольких правильных ответов.

2). Задания с выбором  одного правильного ответа 

Принципы подбора ответов:

Противоречивость применяется при создании заданий с двумя ответами, в

одном из ответов используется частица «не». Ответы подбираются так, чтобы второй отрицал первый.

Например: Источниками финансирования дефицита бюджета кредиты ЦБ:

1) являются;

2) не являются.

Противоположность – этот принцип может проявляться в 3 вариантах:

Первый вариант – три возможных состояния:

Например: Бюджет РТ в 2008 г. принят с__________

Основными методическими требованиями к составлению тестовых заданий являются:

• адекватность инструкции форме и содержанию задания;

• логическая форма высказывания в задании;

• наличие в ответах на задания наряду с правильными ответами неверных ответов;

• наличие в задании места для ответов;

• единые правила оценки ответов.

Не рекомендуется включать в тестовые задания:

• дискуссионные вопросы и ответы;

• задания, имеющие громоздкие формулировки;

• задачи, требующие сложных расчетов.

Правила формулирования вопросов

Преподавателю необходимо учитывать следующие правила формулирования.

1. Каждый вопрос должен  быть логически завершенным.

2. Необходимо избегать  слов с двойным значением.

3. Необходимо предлагать  студенту такие варианты ответов, каждый из которых приемлем  в одинаковой степени.

4. Простые вопросы должны  предшествовать сложным вопросам.

Основное требование к тестовым вопросам, направленных на выявление знаний, умений и навыков, заключается в том, что не только вопрос, но и правильный ответ должны быть однозначными, краткими, четкими, не обладать слишком большим объемом.

Оптимальным количеством альтернатив ответов на вопрос считается 3 – 4, минимальным – 3, максимальное количество альтернатив зависит от объема предлагаемых альтернатив.

В заданиях множественного выбора количество правильных ответов объективными причинами не ограничивается. В том случае, если вариантов правильных ответов несколько, следует видоизменить инструкцию, указав на то, что необходимо отметить буквы, соответствующие правильным ответам, или указать на то, что правильных ответов несколько.

При составлении вопросов следует особенно осторожно использовать слова: «иногда», «часто», «всегда», «все», «никогда».

Место правильного ответа должно быть определено таким образом, чтобы оно не повторялось от вопроса к вопросу, давалось в случайном порядке. Лучше использовать не длинный вопрос и короткий ответ для того, чтобы студент не потерял смысл задаваемого вопроса, важна и экономия времени работы с тестом.

Рекомендации по составлению тестов для применения их на компьютере

Для эффективной разработки компьютерной программы тестового материала при составлении тестов разработчикам важно учитывать, что матрица может иметь следующий вид.

Вопрос 1.

Варианты ответов

1. … 

2. … 

3. … 

Полученные данные могут иметь такую форму, как:

— по каждому респонденту:

0 – Х баллов – характеристика  соответствующего уровня студента;

Х1 – Х2 баллов – характеристика соответствующего уровня студента в группе;

– по всей группе:

0% – Х% – характеристика  уровня группы;

Х1 % – Х2 % – характеристика уровня группы на курсе;

— по каждой кафедре:

0% – Х% – характеристика  уровня кафедры;

Х1 – Х2 % – характеристика уровня кафедры по академии;

Полученные данные по каждому обучаемому, группе в целом, по дисциплине, изучаемой на нескольких специальностях, и т.д. в ходе мониторинга позволят создать целостную картину качества образовательного процесса в академии. На основании этого через преобразования появляется возможность не только эффективно управлять, но и повысить качество данного процесса.

V. Рекомендации по назначению нормы трудности  
тестовых заданий

Норма трудности определяется разработчиком тестовых заданий и указывает субъективную величину того, насколько тяжело будет решить данный тест.

1. Норма трудности может  оцениваться с учетом количества  используемых концептов (формула, правило, аксиома и т.д.), необходимых для  поиска правильного решения. Чем  больше шагов нужно выполнить  для получения правильного ответа, тем выше норма трудности, тем  сложнее считается тест.

2. Если тестовое задание  направлено на «опознание» какого-то  объекта или на проверку изученного  понятия, материала, то его следует  считать простым.

3. Если тестовое задание  направлено на выбор одного  варианта ответа из многих  с помощью знания всего одного  концепта, то такое задание следует  считать простым.

4. Если тестовое задание  открытого типа направлено на  выявление знания определения  односложного базового термина, то такое задание следует считать  простым.

5. Если тестовое задание  направлено на применение усвоенных  ранее знаний или на проверку  «знаний воспроизведения копии», то такое задание следует считать  среднего уровня сложности.

6. Если тестовое задание  направлено на применение усвоенных  знаний и умений в нестандартных  условиях (т.е. в условиях, ранее не  знакомых испытуемому) или на  проверку «знаний умения и  применения», то такое задание  следует считать сложным.

Назначение нормы трудности можно осуществлять исходя из принадлежности задания основному и дополнительному материалам (уровень значимости). Если тестовое задание раскрывает базовое понятие, то такое задание можно считать простым, если же тестовое задание принадлежит к дополнительному материалу, то его можно считать сложным.

Назначение нормы трудности можно осуществлять исходя из принадлежности тестового задания уровню «глубины» спецификации теста. Если оно раскрывает самый нижний уровень иерархии спецификации теста (например, некоторое понятие), то такое задание будет легким. Принадлежность тестового задания средним уровням иерархии спецификации теста (например, некоторой теме или подтеме) повышает норму трудности – средний уровень сложности. Наконец, тестовое задание, относящееся к верхнему уровню, корню дерева иерархии (например, к разделу, главе), можно считать сложным.

VI . Экспертиза качества тестов

Экспертиза тестовых заданий, вопросов является обязательным условием для создания тестов вне зависимости от уровня их применения.

Рекомендуется соблюдать следующие параметры тестов:

1. Соответствие содержания  тестовых заданий государственному  образовательному стандарту по  учебной дисциплине (базовая часть  тестовых заданий – 70% – 85%), а также включение дополнительных тестовых заданий (вариативная часть тестовых заданий – 15% – 30%).

2. Подбор заданий, комплексно  отображающих основные темы учебной  дисциплины.

3. Тестовые задания по  конкретной учебной дисциплине  должны наиболее полно отображать  ее содержание и ключевые понятия, чтобы иметь качественную объективную  оценку знаний студентов. Включение  в тест второстепенных элементов  содержания может привести к  неоправданным выводам о знании  или незнании учебной дисциплины.

Необходимо соблюдать пропорции в количестве тестовых заданий по темам учебной дисциплины.

Необходимо проверять соответствие содержания тестовых заданий знаниям, навыкам и умениям, оцениваемым у студентов.

В каждом тестовом задании необходима определенность, логичность, отсутствие некорректных формулировок, выделение одного предмета измерения (ключевого понятия, термина, правила, определения и т.д.).

Внутренняя экспертиза качества теста

Каждому эксперту выдаются следующие материалы:

• Спецификация и план теста.
• Инструкция по экспертизе.
• Формы для заключения об экспертизе и записи решений.

В процессе экспертизы проводится следующая работа:

• Выполняется каждое задание теста (указывается правильный ответ, приводится решение задания, где необходимо).
• Анализируются формулировки задания (проверяется предметная корректность формулировок).
• Анализируется содержание заданий на их тематическую принадлежность и уровень сложности (базовый, повышенный или высокий).
• В конструктивной форме формулируются замечания к каждому из заданий с предложениями, что и как необходимо изменить.
• Формулируется заключение о пригодности теста для использования.

Спецификация теста включает

• Цель создания теста, обоснование выбора подхода к его созданию, описание возможных сфер его применения.
• Перечень нормативных документов (базисных программ, требований к уровню подготовки выпускников и др.), используемых при планировании содержания теста.
• Количество заданий различной формы с указанием числа ответов к закрытым заданиям, общее число заданий в тесте.
• Вес каждого задания, рекомендуемый автором теста.
• Рекомендуемое время выполнения теста, среднее время выполнения одного задания с учетом специфики формы.
• Требования государственных образовательных стандартов по дисциплине.