Технологии компьютерного тестирования как элемент системы поддержки принятия решений в образовательной деятельности

ИНТЕГРАЦИЯ ОБРАЗОВАНИЯ

ческого и нравственного климата в коллективе (студенческой группе); самооценку стрессоустойчивости, нравственной культуры личности педагога, степени ориентации студента на здоровый образ жизни.

2. Учебно-методическое обеспечение комплекса технологий мониторинга воспитания и саморазвития студентов как конкурентоспособных личностей, разработанного учеными научной Казанской школы под руководством академика РАО В. И. Андреева.

Комплекс ориентирован на концептуальную основу гарантированного качества высшего образования, базирующуюся на принципах инновационности, конкурентоспособности, прогностичности и творческого саморазвития образовательных систем XXI в. В общей сложности разработано более 10 технологий мониторинга воспитания и саморазвития студентов.

В целях оказания помощи образовательным учреждениям по организации воспитательной работы с обучающимися, подготовки к процедурам аттестации

и государственной аккредитации организуются научно-методические семинары для заместителей деканов по воспитательной работе и кураторов студенческих групп по теме «Мониторинг качества воспитания и саморазвития студента как конкурентоспособной личности».

Научно-методический семинар состоит из двух модулей:

1) обучение внедрению технологий мониторинга качества воспитания и саморазвития студентов на основе компьютерной диагностики;

2) консультация по внедрению учебных курсов, обладающих следующими диагностическими функциями: «Конку-рентология», «Эвристика для творческого саморазвития» и «Планинг творческого саморазвития».

Таким образом, чрезвычайно ценным и педагогически значимым является доведение всех комплексных, многолетних исследований от концептуально значимых инновационных теорий до конкретных образовательно-воспитательных технологий, а также применение их в реальной педагогической практике высшей школы.

ТЕХНОЛОГИИ КОМПЬЮТЕРНОГО ТЕСТИРОВАНИЯ КАК ЭЛЕМЕНТ СИСТЕМЫ ПОДДЕРЖКИ ПРИНЯТИЯ РЕШЕНИЙ В ОБРАЗОВАТЕЛЬНОЙ ДЕЯТЕЛЬНОСТИ

В. Н. Гусятников, заведующий кафедрой прикладной математики Саратовского государственного социально-экономического университета, профессор,

Т. Н. Соколова, доцент кафедры информационных систем в экономике, заместитель начальника отдела контроля качества образования Саратовского государственного социально-экономического

университета

Одним из положений Болонской де- них разработку, внедрение и совершен-кларации является содействие европей- ствование системы менеджмента каче-скому сотрудничеству в обеспечении ка- ства образования.

чества с целью разработки сопостави- Всякая система управления каче-

мых критериев и методологий. Активное ством в образовании должна быть осно-

включение региональных вузов России в вана на объективных показателях, влия-

процесс интеграции в европейскую и ми- ющих на качество и адекватно характе-

ровую системы делает актуальными для ризующих процесс обучения. В высшей

111!111Й1И1!Ш № 4,

школе такими формальными, легко измеряемыми и контролируемыми показателями выступают квалификационный состав преподавателей, площадь учебных аудиторий, обеспеченность учебными пособиями и т. д. Однако на качество самого обучения могут влиять и другие, как правило, скрытые факторы: ошибки в разработанных рабочих программах, недостаточно высокий уровень квалификации конкретных преподавателей, невысокое качество учебных пособий по дисциплине и т. д.

Технологии компьютерного тестирования студентов при правильной организации анализа полученных результатов могут стать действенным инструментом выявления скрытых факторов, влияющих на уровень обучения, и эффективным средством повышения качества предоставляемых вузом образовательных услуг.

Преимущества тестирования — объективность, массовость, оперативность, сопоставимость результатов. Именно поэтому тестирование в последние годы становится основным методом итоговой оценки при контроле качества образования и применяется в форме ЕГЭ в школе или в форме федерального интернет-экзамена (ФЭПО) в вузах.

Компьютерное тестирование как один из инструментов мониторинга качества образовательного процесса может использоваться на разных этапах обучения. Соответственно различны и требования, предъявляемые к тестам и методам анализа результатов тестирования. Выделим контрольные точки в процессе обучения, на которых использование компьютерных тестов представляется наиболее эффективным.

1. Тестирование при проведении вступительных испытаний для отбора абитуриентов, имеющих необходимый начальный уровень знаний по предмету. Основной проблемой на данном этапе являются жесткие ограничения по защищенности и конфиденциальности банка тестовых заданий (БТЗ). При этом банк нельзя использовать многократно, а значит, по-

лучать статистику для определения меры трудности заданий и выявления среди них «плохих». К тому же в роли экспертов и разработчиков банка тестовых заданий выступает один, причем очень ограниченный, круг лиц. В силу названной особенности полученные результаты, в отличие от результатов на следующих этапах учебного процесса, обладают наибольшей субъективностью.

2. Входной контроль уровня знаний студентов в начале изучения дисциплины с целью выявления дидактических единиц, на которые при изложении материала курса следует обратить особое внимание.

3. Текущее тестирование, используемое в процессе обучения как один из инструментов педагогического процесса. Оно должно не только оценивать степень освоения отдельными студентами и группой в целом изучаемого раздела дисциплины, но и давать возможность студенту самостоятельно повысить уровень знаний по данной теме или дисциплине.

4. Итоговое тестирование по дисциплине, позволяющее проверить уровень знаний студентов на соответствие рабочим планам по изучению дисциплины.

5. Тестирование по некоторым разделам одной дисциплины в рамках входного контроля по другой (дисциплине-пре-емнику) для оценки уровня остаточных знаний. Исследование темпа убывания остаточных знаний позволит так выстроить учебный план, чтобы максимально эффективно использовать и углублять (расширять) знания, полученные ранее.

6. Полидисциплинарное тестирование на этапе государственной аттестации выпускников для оценки соответствия обученности студентов требованиям общества и предприятий-потребителей.

7. Тестирование остаточных знаний студентов по отдельным дисциплинам в процессе аккредитации и лицензирования вуза.

Для реализации поставленных целей должны быть разработаны качественные БТЗ, хорошо структурированные, обла-

ИНТЕГРАЦИЯ ОБРАЗОВАНИЯ

дающие высокой валидностью, репрезентативностью и надежностью. Кроме того, в системе тестирования должен быть модуль аналитической обработки полученных результатов тестирования, обеспечивающий решение таких задач, как:

1) предоставление статистики результатов по каждому тестовому заданию (количество предъявлений ТЗ — количество правильных ответов). На основе полученных данных принимается решение о редактировании банка тестовых заданий;

2) проведение сравнительного анализа результатов и выявление зависимостей результатов. Это позволит принимать решения по совершенствованию процесса преподавания дисциплины и оценки качества работы преподавателя.

Важными, на наш взгляд, являются следующие виды анализа:

— анализ результатов по отдельным дидактическим единицам;

— сравнительный анализ результатов входного и итогового тестирования;

— сравнительный анализ результатов текущих тестирований по отдельным

7

темам и результата итогового тестирования;

— сравнительный анализ результатов итогового тестирования и входного тестирования в рамках дисциплины-приемника.

В качестве примера приведем результаты сравнительного анализа оценок, полученных в четырех разных учебных группах при проведении традиционного устного экзамена в Саратовском государственном социально-экономическом университете, и оценок по этому же предмету при проведении федерального интернет-экзамена. Для перевода в оценку результатов ФЭПО применялась шкала соответствия процентов освоенных дидактических единиц (ДЕ): оценке «отлично» соответствовало более 90 % освоенных единиц, оценке «хорошо» — более 75, «удовлетворительно» — более 50 %.

Результаты сравнительного анализа представлены на рисунке в виде коэффициентов, показывающих, во сколько раз отличается количество каждой из оценок в этих двух формах итогового контроля. Коэффициент, равный единице, означает, что результаты совпадают.

Неудовлетворительно Удовлетворительно Хорошо Отлично

Группа 1  Группа 2  Группа 3  Группа 4

Коэффициент отличий результатов ФЭПО и устного экзамена

На основании вышеприведенных результатов можно сделать следующие выводы.

1. Результаты экзаменов в группах 3 и 4 по двум разным формам практически совпадают.

6

5

4

3

2

1

0

11111111111* № 4,

2. Для оценки «удовлетворительно» результаты совпадают во всех четырех группах.

3. Результаты в группах 1 и 2 для оценок «неудовлетворительно» и «отлично» значительно различаются. Причинами такого расхождения могут быть несоответствие рабочей программы по дисциплине образовательному стандарту, недостаточно глубокое изложение отдельных ДЕ преподавателем, субъективизм преподавателя при проведении устного экзамена по дисциплине, недостаточный уровень подготовки студентов в группах для освоения всех дидактических единиц.

Так как преподаватель во всех группах был один и тот же, то наиболее вероятными причинами выявленных различий в итоговых результатах можно считать разный уровень подготовки студентов в группах и субъективизм экзаменатора. Если бы перед изучением дисциплины был проведен входной контроль уровня знаний студентов, то можно было бы обоснованно установить причины различий в оценке знаний студентов.

Дальнейший анализ результатов ФЭПО заключался в сравнении оценок, основанных на проценте освоенных ДЕ и проценте выполненных тестовых зада-

ний. Данный анализ показал, что в некоторых случаях наблюдается существенное расхождение в этих оценках. Например, процент выполненных студентом заданий составляет величину 46 («неудовлетворительно»), а процент освоенных ДЕ — 87 («хорошо»). Встречается и обратное соотношение. В этом случае возникает неопределенность, которая, видимо, должна разрешаться на основе обеих оценок. Можно предложить построение шкалы оценок с учетом общего количества ДЕ и с шагом, кратным проценту, приходящемуся на одну ДЕ. При этом за основу берется оценка, вычисленная из процента освоенных ДЕ, а процент выполненных заданий используется для ее корректировки.

Приведенный пример показывает, что информационные системы компьютерного тестирования, оснащенные модулем анализа результатов, позволяют оперативно получать объективные данные, необходимые в системах управления качеством образования. С учетом таких данных можно оперативно выявлять скрытые факторы, влияющие на качество обучения, и принимать обоснованные решения по совершенствованию учебного процесса в вузе.

ТЕСТОВЫИ КОНТРОЛЬ ОБЩЕЕВРОПЕЙСКИХ КОМПЕТЕНЦИЙ: типология единиц социокультурной компетенции пользователя

иностранного языка

С. Е. Балютина, аспирант Государственного института русского языка им. А. С. Пушкина

Растущая роль человеческого капи- общению представителей разных языков

тала как фактора экономического разви- и культур. В этих условиях одним из на-

тия и увеличивающаяся социальная и правлений развития современной россий-

индивидуальная потребность в знании ской лингводидактики является участие

иностранных языков выдвигают актуаль- в создании общеевропейского культурно-

ное требование измерения, оценки и сер- образовательного пространства, ориен-

тификации функциональной готовности к тированного на единые цели обучения и