Системы тестирования: Psychology OnLine.Net

Системы тестирования

Системы тестирования
Добавлено
09.11.2002 (Правка 29.11.2012)

КОМПЬЮТЕРНЫЕ СИСТЕМЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ НА ОСНОВЕ ИСКУССТВЕННЫХ НЕЙРОННЫХ СЕТЕЙ

© А.А Арзамасцев, Н.А. Зенкова
e-mail: arz_sci@mail.ru

В настоящей работе мы предлагаем использовать аппарат искусственных нейронных сетей (АИНС) для разработки адаптивных систем психологического тестирования, определения внутренней структуры известных психологических тестов и, возможно, некоторых свойств личности. Результаты нейросетевого моделирования известного теста Л.А. Йовайши свидетельствуют о принципиальной возможности такого подхода.

Главной задачей при разработке практически любой системы психологического тестирования является получение сведений об интересующих свойствах индивида путем изучения ответов на специально подобранные вопросы или задания. Причины, по которым интересующее свойство не может быть изучено непосредственно довольно разнообразны: 1) нежелание самого индивида подвергаться системе оценок; 2) тестирование интересующего свойства чрезвычайно трудоемко; 3) оно является комплексным показателем, содержащим в себе большое число компонент, правила агрегации которых плохо изучены или неизвестны; 4) сама технология оценки указанного свойства вводит индивида в состояние, в котором он не может давать адекватные ответы.

Поэтому психолог старается создавать систему тестирования таким образом, чтобы, используя обнаруженные ранее (известные) корреляции между исследуемым свойством и ответами на специально подобранные (обычно довольно простые) вопросы или задания, определить числовые характеристики данного свойства индивида. В этом смысле психологический тест можно считать моделью личности.

Разработка типовой системы психологического тестирования включает следующие этапы.

Этап 1. Наблюдая за большими группами респондентов, психолог находит корреляции между факторами, для значений которых он хочет получить оценки (уровень интеллекта, профессиональная пригодность и др.) и ответами на достаточно простые (для тестируемого) вопросы, которые могут быть легко обработаны (вопросы типа: «Любите ли вы читать технические журналы?», задачи на умение логически мыслить, использовать особенности памяти и др.). После этого, на основе полученных выборок рассчитываются коэффициенты корреляции.

Этап 2. Выявленные корреляции используются при разработке системы тестирования. Факторы, связь которых с интересующим свойством оказывается несущественной, обычно исключаются из рассмотрения.

Этап 3. Проводится идентификация и подбор настроечных параметров теста (например, поиск весовых коэффициентов отдельных факторов).

Этап 4. Осуществляется проверка валидности теста. Для оценки валидности снова опрашивают большое число респондентов (контрольная группа), для которых заранее известно (оценено каким-либо независимым, обычно экспериментальным методом) значение тестируемого свойства индивидов. По критериям статистической значимости определяют валидность теста. При необходимости проводится коррекция структуры теста или настроечных параметров, после которой приходится снова возвращаться к одному из этапов 1-3.

Необходимо отметить, что приведенная здесь схема не претендует на полноту. Она в общих чертах напоминает схему разработки математической модели объекта, т.к. по существу система тестирования и является таковой по отношению к личности.

Данная технология разработки тестирующих систем имеет существенные недостатки: значительная трудоемкость исполнения практически всех этапов, вызванная большими объемами выборок; требуемая исходная выборка вопросов и заданий существенно превышает размер выборки, которая в дальнейшем используется для тестирования (остается в тесте); необходимость числовых оценок как самих значимых факторов, так и параметров, за которыми ведется наблюдение; некоторые чисто математические трудности (например, трудно выбрать значения весовых коэффициентов).

Указанные выше недостатки имеют чисто технологический характер. Однако, практически всем системам психологического тестирования присущи и некоторые принципиальные недостатки.

1. В условиях динамично меняющегося общества имеет место нестационарность социума (социально-психологического объекта), обусловленная значительными изменениями традиционной системы связей, ценностей и взаимоотношений субъектов. По этой причине существующие технологии психологического тестирования, опирающиеся на статистические стационарные связи (корреляционные зависимости), имеют ограниченное время жизни. Для преодоления этого недостатка тестирующая система должна иметь возможность адаптации к изменившимся условиям в процессе ее эксплуатации.

2. При разработке теста по традиционной технологии оперируют данными, характерными для некого «усредненного индивида». Усреднение производится в пределах исследуемых групп. При таком способе системой тестирования будет использоваться некая «модель усредненной личности». Поэтому при тестировании какого-либо конкретного индивида различия в реальных индивидуальных показателях и показателях, определенных по тесту, будут тем больше, чем сильнее отличаются характеристики тестируемого от образа «усредненной личности». Для преодоления этого недостатка система психологического тестирования должна иметь возможность «настройки на индивида», т.е. осуществлять сначала выбор «модели личности», а лишь затем осуществлять тестирование индивида на основе этой модели.

Выходом из создавшейся ситуации может являться разработка адаптивной системы тестирования. Мы считаем, что такая адаптация теста может базироваться на предварительном исследовании умения индивида к моделированию в заданной предметной области [1].

Удобной компьютерной технологией для моделирования теста такого типа является аппарат искусственных нейронных сетей, успешно применяющийся в настоящее время в системах искусственного интеллекта, распознавании образов и др.

В качестве примера для проверки возможности использования АИНС нами предпринята попытка моделирования теста по выявлению склонностей к различным сферам деятельности (методика Л.А. Йовайши, компьютерный вариант разработан в Севастопольском городском центре занятости в июне 1992 года, получен как freeware с сайта www.psychology.net.ru).

Предварительно тест был исследован на стационарность и на валидность получаемых оценок. Для этой цели тестировали десятерых сотрудников ИМФИ, для которых по опыту их работы были предварительно получены объективные оценки. После их тестирования коэффициент корреляции объективных и тестированных значений свойств превысил 0,7, что было сочтено нами как хороший результат.

В качестве искусственной нейронной сети была выбрана программа типа freeware - Neural Network Constructor (NNC), version 3.01, 2001, разработка ВЦ РАН (адрес http://vkrepets.chat.ru/NNC.exe). Данная программа позволяет использовать до 60 входных нейронов, варьировать функцией нейрона, количеством слоев и связей сети. Она содержит в себе готовые алгоритмы обучения по следующим методам: покоординатный спуск, случайный поиск, метод Ньютона, статистический градиентный метод, комбинации этих методов.

В качестве выборки для обучения нейронной сети была сгенерирована по методу Монте-Карло последовательность ответов на тест Л.А. Йовайши (120 строк). Значения тестируемых свойств (склонность к работе с людьми; к умственным видам работ; к работе на производстве; к эстетике и искусству; подвижным видам деятельности; к планово-экономическим видам работ или степень материальной заинтересованности) были получены непосредственно из теста. Структура нейронной сети: тридцать входных (input) нейронов, соединенных с нейроном с линейной функцией (коэффициенты передачи входов показаны на рис.1) и один выходной (output) нейрон. После обучения нейронная сеть позволяла моделировать тест с погрешностью, не превышающей 2%.

В отличие от самого теста Л.А. Йовайши, имеющего жесткую структуру связей, его модель, использующая АИНС, допускает дополнительное обучение на основе вновь поступивших данных, в том числе и в ходе тестирования респондентов, что позволяет адаптировать ее к реальной ситуации (временной нестационарности или свойствам личности).

Таким образом, в данной работе показана принципиальная возможность использования АИНС для создания систем психологического тестирования с адаптацией.

Другой интересной стороной данного подхода является тот факт, что с помощью нейронной сети можно получить внутреннюю структуру любого психологического теста, даже в том случае, если иметь только его исполняемый модуль. А поскольку система тестирования представляет собой модель личности, то, по всей видимости, по аналогичной технологии возможно многое узнать и о системе связей самой личности (индивида).



ЛИТЕРАТУРА

  1. Арзамасцев А.А., Зенкова Н.А. Способность индивидов к аппроксимационно-прогностической деятельности как средство оценки профессиональной пригодности специалистов // Вестник ТГУ. 2001. Т.6. Вып.2, с. 254-261.




Описание Приведены принципы разработки компьютерных систем психологического тестирования нового поколения - на основе технологии искусственных нейронных сетей. Авторы: А.А Арзамасцев, Н.А. Зенкова.
Вложенные файлы
  • art_zenk_pic1.png
Рейтинг
0/5 на основе 0 голосов. Медианный рейтинг 0.
Просмотры 7944 просмотров. В среднем 1 просмотров в день.
Похожие статьи