СПОСОБ ОПРЕДЕЛЕНИЯ ЯЗЫКОВОЙ И ПРОФЕССИОНАЛЬНОЙ КОМПЕТЕНЦИЙ
METHOD FOR DETERMINING LANGUAGE AND PROFESSIONAL COMPETENCE

Изобретение относится к области психофизиологии, касается способа определения языковой и профессиональной компетенций и может быть использовано для проверки уровня знаний в системах образования при оценке профессиональных способностей и тому подобных психофизиологических исследованиях с использованием тестирования.
В настоящее время для оценки компетенций используются различные методы.
Известен метод комплексной оценки персонала (А.И. Паринова. Значение и преимущества комплексной оценки персонала // Журнал "Справочник по управлению персоналом", http://www.ippnou.ru/article.php?idarticle=000434), в котором используются взаимодополняющие методики: оценка психологических и профессиональных особенностей кандидатов, соответствие требованиям должностных позиций, выявление потенциальных возможностей. Состав процедур: моделирующие упражнения, интервью, тесты. Метод имеет высокую надежность и валидность.
Недостатком указанного метода является низкая скорость оценки и высокая стоимость.
Известны психометрические методы оценки (Психометрика http://www.uplatforma.ru/psychometrics.html). Используются методы оценки способностей, склонностей и стилей рабочего поведения человека, алгоритмы фиксирования поведения. Разновидности инструментов: тесты способностей, личностные опросники, мотивационные и ценностные опросники.
Недостатком указанных методов является необходимость сравнения результатов с нормативной группой, длительное время проведения.
Известен метод языкового аудита (Беляева Е.Г. Теория и практика лингвистического аудита как новой технологии диагностики языковых потребностей в контексте корпоративного обучения иностранным языкам: Дис. … канд. пед. наук: 13.00.02 Москва, 2006, 236 с.). Это независимая проверка уровня знания языка сотрудников с использованием тестирования. Очевидным недостатком языкового аудита является то, что использование этой технологии требует значительных материальных затрат. Также невозможно проводить языковой аудит удаленно, с участием неограниченного количества тестируемых.
Наиболее близким по технической сущности и достигаемому результату к предлагаемому изобретению является способ определения уровня знания языка, изложенный в статье В.А. Демарева, С.А. Полевая «Возможная модель для предсказания уровня знания языка на основе EYE TRACKINGA», опубликованной в сборнике научных трудов «XV Всероссийская научно-техническая конференция «Нейроинформатика-2013», Ч. 1. М.: НИЯУ МИФИ, 2013, принятый за ближайший аналог (прототип).
Способ по прототипу включает измерение значимых параметров движения глаз при работе тестируемого с двумя текстами - простым и маркировочным, определение коэффициентов значимых параметров движения глаз, сопоставление коэффициентов значимых параметров движения глаз при чтении человеком двух текстов, а также при выполнении задачи зрительного поиска в этих же текстах. При этом увеличение разницы в параметрах движений взора при чтении и работе с простым и маркировочным текстом свидетельствует об ухудшении компетенции в оцениваемой сфере.
Преимуществами и общими признаками с предлагаемым изобретением является отсутствие необходимости в очном присутствии тестирующего, автоматизация процесса оценки, неограниченное количество оценок в единицу времени, повышение скорости оценки.
Недостатком способа по прототипу является отсутствие конкретных количественных характеристик, определяющих компетентность или некомпетентность, а также отсутствие совокупности показателей, определяющих уровень компетенции в оцениваемой сфере, что снижает объективность оценки.
В задачу изобретения положено создание нового способа определения языковой и профессиональных компетенций.
Техническим результатом от использования изобретения является повышение объективности оценки языковой и профессиональной компетенций человека.
Поставленная задача достигается тем, что в способе определения языковой и профессиональной компетенций, включающем измерение значимых параметров движения глаз при работе тестируемого с двумя текстами - простым и маркировочным, определение разностных коэффициентов значимых параметров движения глаз, осуществляют измерение трех значимых параметров движения глаз - продолжительности фиксаций (пф), мс, продолжительность саккад (пс), мс и амплитуду саккад (амп), угл. ед., определяют коэффициент продолжительности фиксаций при поиске ответа на вопрос в текстах К пф в, коэффициент продолжительности саккад при чтении текстов К пс ч, коэффициент амплитуды саккад при чтении текстов К амп ч по формуле:
,
П
где К - коэффициент значимого параметра движения глаз, П - значимый параметр движения глаз, оценку компетенций проводят путем сравнения полученных значений коэффициентов значимых параметров тестируемого со значениями коэффициентов этих же параметров компетентных и некомпетентных людей, эмпирически установленных, при этом определяют, что компетентным людям соответствуют следующие значения коэффициентов: Кпф в = -0,04086-0,054993, Кпс ч = -0,16499-0,06329, Камп ч = от -0,07391-0,149552, а некомпетентным людям соответствуют следующие значения коэффициентов: Кпф в = -0,10537-0,009281, Кпс ч = т -0,01182-0,148309, Камп ч = 0,054527-0,245575; маркировочный текст содержит термины из той области, в которой необходимо оценить компетенцию; работа с текстом включает чтение текста, поиск ответа на вопрос в тексте, чтение простого текста, чтение маркировочного текста, поиск ответа на вопрос в простом тексте, поиск ответа на вопрос в маркировочном тексте; для регистрации движения глаз используют программно-аппаратный комплекс Eye Tracker SMI iView XTM Hi-Speed 1250.
Предлагаемый способ определения языковой и профессиональной компетенций осуществляют следующим образом.
Тестируемому представляют 2 текста. Один из них - простой, второй - маркировочный, содержащий специальные термины из той области, в которой необходимо определить компетенцию.
Если необходимо оценить компетенцию в иностранном языке, то простой текст представляют на русском языке, без специальной лексики, а маркировочный текст представляют на иностранном языке, без специальной лексики. Если необходимо оценить компетенцию в определенной профессиональной сфере, то простой текст представляют на русском языке, без специальной лексики, а маркировочный текст представляют на родном языке тестируемого, со специальной лексикой оцениваемой профессиональной сферы.
Тестируемому предлагают выполнить следующие задания с текстом:
- чтение текста (ч);
- поиск ответа на вопрос в тексте (в);
- чтение простого текста (ч пр. текст);
- чтение маркировочного текста (ч марк. текст);
- поиск ответа на вопрос в простом тексте (в пр. текст)
- поиск ответа на вопрос в маркировочном тексте (в марк. текст).
Для регистрации движения глаз тестируемого используют, например, программно-аппаратный комплекс Eye Tracker SMI iView XTM Hi-Speed 1250.
Параметры движения глаз тестируемого по тексту описывают следующими амплитудно-временными характеристиками:
- начало саккады, мс;
- продолжительность саккады, мс;
- окончание саккады, мс;
- начальная позиция X;
- начальная позиция У;
- конечная позиция X;
- конечная позиция У;
- амплитуда, угл. ед.;
2
- среднее ускорение, угл. ед./с;
2
- пиковое ускорение, угл. ед./с;
2
- пиковое замедление, угл. ед./с;
- средняя скорость, угл. ед./с;
- пиковая скорость, угл. ед./с;
- пиковая скорость в процентах, %;
- начало фиксации, мс;
- продолжительность фиксаций, мс;
- окончание фиксации, мс;
- позиция X;
- позиция У;
- средний размер зрачка по X [пикс];
- средний размер зрачка по У [пикс];
- дисперсия.
Для определения языковой и профессиональной компетенций используют три значимых параметра движения глаз тестируемого:
- продолжительность фиксаций (пф), мс - время от начала фиксации до ее окончания в одном месте на экране;
- продолжительность саккад (пс), мс - время от начала саккады (глазного движения) до ее окончания;
- амплитуда саккад (амп), угл.ед. - угловой поворот глаза при саккаде.
Для удобства обработки и сопоставления результатов измерений для указанных значимых параметров движения глаз тестируемого определяют их коэффициенты:
- коэффициент продолжительности фиксаций при поиске ответа на вопрос в текстах (К пф в);
- коэффициент продолжительности саккад при чтении текстов (К пс ч);
- коэффициент амплитуды саккад при чтении текстов (К амп ч).
Коэффициенты значимых параметров движения глаз тестируемого определяют по формуле:
П
где К- коэффициент значимого параметра движения глаз,
П - значимый параметр движения глаз.
Оценку компетенций проводят путем сравнения полученных значений коэффициентов значимых параметров движения глаз тестируемого со значениями коэффициентов этих же параметров движения глаз компетентных и некомпетентных людей, эмпирически установленных, представленных в таблице 1.
Определение компетенций по трем значимым параметрам движения глаз тестируемого путем сравнения полученных значений коэффициентов значимых параметров со значениями коэффициентов этих же параметров компетентных и некомпетентных людей, эмпирически установленных, повышает объективность оценки языковой и профессиональной компетенций человека.
Ниже приведены примеры определения языковой и профессиональной компетенций с помощью заявленного способа:
Пример 1. Определение уровня знания английского языка
Тестируемый (уровень знания английского языка Intermediate) читал 2 текста (на русском и на английском языке), затем искал ответы на поставленные 5 вопросов в этих же текстах. В это время записывались движения глаз. Для регистрации движения глаз применен программно-аппаратный комплекс Eye Tracker SMI iView XTM Hi-Speed 1250, обеспечивающий высокоточный мониторинг движений глаз при работе с визуальными стимулами: скорость опроса в 1250 Гц при времени обработки менее 0.5 миллисекунд, разрешение по пространству 1680*1050.
Были получены следующие усредненные значения амплитудно-временных характеристик движений взора:
При чтении простого (русского) текста:
При чтении маркировочного (английского) текста:
При поиске ответов на вопросы в простом (русском) тексте:
При поиске ответов на вопросы в маркировочном (английском) тексте:
Ниже приведены значения коэффициентов по продолжительности фиксаций при поиске ответа на вопрос в тексте, по продолжительности саккад при чтении текстов, по амплитуде саккад при чтении текстов:
Таким образом, все полученные значения соответствуют тому, что тестируемый компетентен в английском языке.
Пример 2. Определение уровня компетенции в психологии
Тестируемый (преподаватель психологии) читал 2 текста (простой и маркировочный - содержащий специальные психологические термины), затем искал ответы на поставленные 5 вопросов в этих же текстах. В это время записывались движения глаз.
Для регистрации движения глаз применен программно-аппаратный комплекс Eye Tracker SMI iView XTM Hi-Speed 1250, обеспечивающий высокоточный мониторинг движений глаз при работе с визуальными стимулами: скорость опроса в 1250 Гц при времени обработки менее 0.5 миллисекунд, разрешение по пространству 1680*1050.
Были получены следующие усредненные значения амплитудно-временных характеристик движений взора:
- при чтении простого текста:
- при чтении маркировочного (психологического) текста:
- при поиске ответов на вопросы в простом тексте:
- при поиске ответов на вопросы в маркировочном (психологическом) тексте:
Ниже приведены значения коэффициентов по продолжительности фиксаций при поиске ответа на вопрос в тексте, по продолжительности саккад при чтении текстов, по амплитуде саккад при чтении текстов:
Таким образом, все полученные значения соответствуют тому, что тестируемый компетентен в психологии.