Б01: 10.12731^8^2015-4-21 УДК 004.8:681.3
АЛГОРИТМ ПРЕДЪЯВЛЕНИЯ ТЕСТОВЫХ ЗАДАНИЙ В ПРОЦЕДУРЕ АТТЕСТАЦИИ ПЕРСОНАЛА ПРОМЫШЛЕННЫХ ПРЕДПРИЯТИЙ
Николаев А.Б., Ярцев М.И.
В статье проанализирована процедура аттестации персонала промышленных предприятий на предмет оптимизации и автоматизации. Предложены и реализованы оптимизационные решения для всех стадий подготовки и проведения аттестационного тестирования: для создания ТЗ, для пакетного импорта ТЗ в БДТЗ и для адаптивного алгоритма предъявления ТЗ испытуемому. Разработанная методика адаптивного предъявления может выполнять различные функции, в зависимости от настроек алгоритма. Диагностирующая функция выявляет актуальный уровень обученности учащегося и его «пробелы» в знаниях. Обучающая предоставляет рекомендации, как устранить выявленные «пробелы». Развивающая распределяет задания согласно способностям, отвечающим уровню подготовки испытуемого. Мотивирующая создает положительные эмоции за счет предоставления посильных заданий и объективных оценок. Разработанный алгоритм адаптивного предъявления ТЗ также учитывает время выполнения каждого ТЗ при выявлении уровня обученности
испытуемого. Функция пакетного импорта позволяет разрабатывать ТЗ в общедоступных текстовых редакторах и импортировать ТЗ в БДТЗ партиями, что сокращает время- и ресурсозатраты на производство БДТЗ.
Ключевые слова: аттестация персонала; адаптивная технология тестирования; автоматизация импорта ТЗ.
ALGORITHM FOR MAKING TEST ITEMS IN THE QUALIFICATION PROCEDURES STAFF INDUSTRIAL ENTERPRISES
Nikolaev A.B., Yartzev M.I.
The article analyzes the procedure of certification of personnel of industrial enterprises for optimization and automation. Proposed and implemented optimization solutions for all stages of the preparation and managing conformance testing: to create test tasks; for batch import of test tasks and adaptive algorithm presentation of the test tasks for the person to be tested. The developed technique of adaptive presentation may perform various functions, depending on the settings of the algorithm. Diagnose function detects the actual level of knowledge of the tested person and his «gaps» in knowledge. The training provides recommendations on how to overcome the identified «gaps». Developing distributes tasks according to his ability, to meet the level of preparation of the test. Motivating creates positive emotions by providing manageable tasks and objective
evaluations. The developed algorithm of adaptive presentation test tasks also watches for the time consumed to finish each task and this fact helps us to identify the real level of knowledge of the tested person. Batch import function allows us to develop test tasks using generic text editors and import test tasks in a batch way, what reduces the time- and resource- consumption for the test creation.
Keywords: attestation of personnel; adaptive testing technology; automatisation of import of test questions.
Существуют сферы профессиональной жизни, в которых знания регулярно устаревают и обновляются (средний срок жизни технических знаний около пяти лет [1]) и в таком случае работник данной сферы должен постоянно участвовать в образовательном процессе или проходить курсы переподготовки на регулярной основе. Тоже касается случая необходимости проведения регулярных аттестаций и проведений допуска работников [2].
В системе компьютерной аттестации дистанционного или очного характера главной частью считается система тестового аттестационного контроля. Она должна обладать развитыми средствами администрирования, формировать алгоритмические структуры тестов, предъявлять их, а также конструировать тестовые задания. [3]
Объединение адаптивных механизмов с формой конструирования тестовых заданий и их предъявления позволяет создать гибко настраиваемую систему адаптивного тестового контроля
[4].
Одна из самых внушительных по трудозатратам частей создания модели аттестационного тестирования - создание базы данных тестовых заданий [5]. Если этот процесс не оптимизировать и не автоматизировать - среднее время подготовки достаточной базы данных тестовых заданий по заданной предметной области у эксперта может занимать время, до восьми раз большее, чем время, выделенное на изучение данной предметной области. Поэтому вопрос автоматизации создания БДТЗ актуален и рассматривается в данной статье.
Если рассматривать данный вопрос с точки зрений конструирования и предъявления тестовых заданий, лучшим выходом станет стандартизация в графическом формате формы представления. В дальнейшем, это даст возможность использовать разные общесистемные платформы. В ходе проведенных исследований стало ясно, что распространенная «закрытая» форма, а также формы «на упорядочение» и «на соответствие», сводятся к форме «на перетаскивание» в графическом виде. Исходя из описания тестового задания, конструктор создает flash-файл. Его можно включать в HTML и использовать для режима «самоконтроль» и «тренажер». Динамическая генерация flash-файлов тестовых заданий с регистрацией возможных ответов является самой важной функциональной возможностью [6].
В конструкторе тестов должен быть удобный интерфейс создания тестовых заданий, а также качественные формы представления. [7] Эти два параметра существенно влияют на продолжительность подготовки тестов. Критерий времени очень важный показатель. При формировании тестов число заданий должно
быть большим, при этом следует учитывать тот факт, что содержательная часть по большинству направлений аттестации быстро устаревает. Проигрыватель тестовых заданий должен быть рассчитан не только на работу в Сети Интернет, но также в ЛВС и ПК варианте. [8]
Методы предъявления тестового задания аттестуемому
ТЗ из созданной БДТЗ испытуемому можно предъявлять множеством различных способов. Например, последовательным перебором ТЗ или прибегнуть к предъявлению случайного ТЗ. Но наиболее перспективным методом предъявления ТЗ на данный момент считается адаптивный алгоритм. Адаптивные алгоритмы предъявления заданий, с учетом их сложности, считаются самыми эффективными [9]. За счет этого, немалая часть исследований обращена именно на разработку различных методик экспертного оценивания уровня сложности заданий, которые в дальнейшем корректируются согласно полученным результатам статистической обработки ответов. [10]
Подключение эффективности процедур компьютерного тестового контроля в системы переподготовки, а также математических моделей, даст возможность моделировать образовательную траекторию с точки зрения эффективности накапливания информации, предъявляемой последовательности модулей. [11]
Необходимо разделять процедуры классификации или оценивания уровня знаний и механизм предъявления тестовых заданий.
Рис. 1. Система моделирования процесса тестирования
Проблема оптимизации процесса составления БДТЗ и проблема адаптивного предъявления ТЗ рассмотрена в данной статье.
Создание программы-импортера вопросов в БДТЗ
База Данных Тестовых Заданий должна поддерживаться в актуальном состоянии. Для поддержания актуального состояния необходим периодический аудит БДТЗ и постоянное ее пополнение. Прямое редактирование содержимого SQL базы данных для решения такой задачи не подходит. [12] Для удобного и оперативного импорта Тестовых Заданий в Базу Данных Тестовых Заданий необходимо спроектировать и создать универсальную программу - импортер ТЗ. Программа импорта должна быть сетевой. Пополнять БДТЗ Администратор должен используя любой компьютер, имеющий доступ к сети интернет. В данной разработ-
ке предложено использовать текстовый файл с использованием специальной разметки для временного хранения ТЗ до момента передачи ТЗ на сервер БДТЗ [13]. Временное хранение и подготовка ТЗ в файле формата Rich Text Format позволяет решить поставленные задачи. Тестовые задания должны быть размечены особым образом, как указано в ниже.
Для задания открытого типа следует придерживаться следующей разметки:
Для задания закрытого типа следует придерживаться следующей разметки:
*QUESTIONS_OPEN
#Q_TEXT
#QPICTURE
#CID
Текст вопроса Граф. часть к вопросу Категория вопроса Верный ответ Балл за ответ Категория сложности время в секундах на ответ
#Q_ANS #Q_PRICE #DIF_CAT #TIME
*QUESTIONS_CLOSE
#Q_TEXT
#QPICTURE
#CID
Текст вопроса Граф. часть к вопросу Категория вопроса
#Q1_ANS #Q2_ANS #Q3_ANS #Q4_ANS
Вариант ответа 1 Вариант ответа 2 Вариант ответа 3 Вариант ответа 4
#Q1_PRICE Балл за вариант ответа
#Q2_PRICE Балл за вариант ответа
#Q3_PRICE Балл за вариант ответа
#Q4_PRICE Балл за вариант ответа
#DIF_CAT Категория сложности
#Т1МЕ время в секундах на ответ
Для задания установления соответствия следует придерживаться следующей разметки: *QUESTIONS_ORDER
#Q_TEXT Текст вопроса
#QPICTURE Граф. часть к вопросу
#aD Категория вопроса
#Q1_ANS Вариант ответа 1
#Q2_ANS Вариант ответа 2
#Q3_ANS Вариант ответа 3
#Q4_ANS Вариант ответа 4
#Q_ORDER Верная последовательность
#Q_PRICE Балл за верное установление соответствия
#DIF_CAT Категория сложности
#TIME время в секундах на ответ
Для задания упорядочивания следует придерживаться следующей разметки:
*QUESTIONS_ORDER #Q_TEXT Текст вопроса
#QPICTURE Граф. часть к вопросу #СГО Категория вопроса
#Q1_ANS Вариант ответа 1
#Q2_ANS Вариант ответа 2
#Q3_ANS Вариант ответа 3
#Q4_ANS Вариант ответа 4
#Q_ORDER Верная последовательность
#Q_PRICE Балл за верное упорядочивание
#DIF_CAT Категория сложности
#TIME время в секундах на ответ
Для пополнеия БДТЗ с помощью нового RTF файла в главном окне программы необходимо выбрать пункт «пополнить БДТЗ», ввести пароль администратора и выбрать файл для загрузки.
Рис. 2. Пополнение БДТЗ с помощью загрузки RTF файла со специальной разметкой
После успешно загрузки и импорта данных из файла программа выдает сообщение о количестве и типе импортированных вопросов.
Разработка адаптивного алгоритма аттестации
Программное обеспечение для автоматизации процедуры тестирования помогает профессионалам контролировать изменения в приобретенных навыках и знаниях в процес
Для дальнейшего прочтения статьи необходимо приобрести полный текст. Статьи высылаются в формате PDF на указанную при оплате почту. Время доставки составляет менее 10 минут. Стоимость одной статьи — 150 рублей.