Технология создания новых шкал в тестах систем

 

1. Описание задачи

Часто при работе с различными тестами в системах "Профессор", и "Профессор-кадры" возникает необходимость ввести новую шкалу в имеющиеся тесты. При этом, новая шкала может быть построена различными способами.

В первом случае, новая шкала основывается на существующих шкалах или вопросах и, в этом случае, достаточно с помощью "Конструктора тестов" ввести новую шкалу и задать для нее коэффициенты, основанные на имеющихся в тесте системы.

Во втором случае, новая шкала может содержать дополнительные вопросы и, в этом случае, прежде чем работать со шкалами, необходимо ввести в тест дополнительные вопросы и, уже после этого, вводить новую шкалу и коэффициенты для нее.

В первом и втором случаях технология введения новой шкалы примерно одинакова, и поэтому мы рассмотрим первый случай в качестве примера.

Предположим, что мы придумали новую шкалу, основанную на 3 базовых шкалах теста Кеттела:

  • 1A - общительность
  • 7H- уверенность
  • Q1- радикализм

и назвали ее "Социальная мобильность", обозначив кодом SM.

Таким образом, для введения такой шкалы в тест Кеттела используя Конструктор тестов нужно задать в тесте новую шкалу SM - соц.-мобильность и ввести в эту шкалу коэффициенты, рассчитанные по формуле:

1A+7H+Q1

на основе имеющихся в системе коэффициентов этих шкал.

Полученную таким образом новую шкалу SM можно будет использовать в условиях интерпретации, а также для получения статистики по данной шкале для анализа полученных данных совместно с другими шкалами и тестами.

 

2. Этапы решения задачи

Для решения поставленной задачи помимо "Конструктора тестов" систем "Профессор", и "Профессор-кадры" для расчета коэффициентов мы будем использовать программу Microsoft Excel.

Технологически порядок решения поставленной задачи будет состоять в следующем.

  1. Сначала, мы извлечем таблицу текущих коэффициентов всех шкал Кеттела из системы "Профессор"/"Профессор-кадры" и сохраним ее в текстовом файле.
  2. Затем, загрузив таблицу коэффициентов в Excel, мы рассчитаем коэффициенты для новой шкалы и сохраним новую таблицу в файле.
  3. После этого, создав в системе "Профессор"/"Профессор-кадры" новую шкалу SM, мы введем для нее новые коэффициенты.
  4. Создадим для новой шкалы правила пересчета сырых баллов в стандартные.

Ну, вот шкала и готова. Остается только проверить правильность ввода коэффициентов шкалы и ее работоспособность.

3. Технология решения задачи

Извлечение коэффициентов

Для решения задач из 1 пункта используем "Конструктор тестов" системы "Профессор"/"Профессор-кадры".

Извлечение коэффициентов

В нем открываем основное окно теста Кеттела.

Осуществляем извлечение таблицы текущих коэффициентов всех шкал Кеттела из системы "Профессор"/"Профессор-кадры" и сохранение ее в текстовом файле. Для этого нажимаем F5 в основном окне теста Кеттела, сначала появляется окно

Извлечение коэффициентов

нажимаем далее Enter

Извлечение коэффициентов

и получаем файл KTL.TXC, в котором будет сохранена таблица с коэффициентами.

Расчеты коэффициентов новой шкалы

Сначала загрузим файл KTL.TXC в Excel как текстовый файл.

Для этого будем использовать мастер импорта, который дает возможность правильно загрузить таблицу из исходного файла

Расчеты коэффициентов новой шкалы 

Далее необходимо убедится в том, чтобы каждый столбец был правильно отделен от других вертикальными линиями со стрелками.

Расчеты коэффициентов новой шкалы

После завершения работы мастера получаем таблицу коэффициентов в Excel (каждый коэффициент в своей ячейке).

Расчеты коэффициентов новой шкалы

После этого в имеющуюся таблицу Добавляем столбец SM и записываем в него формулу расчета коэффициентов. Для этого в ячейку S2 записываем следующую формулу =C2+I2+ O2

протаскиваем мышкой до конца файла (последней строки).

Расчеты коэффициентов новой шкалы 

Получаем новую таблицу коэффициентов, 

Расчеты коэффициентов новой шкалы

которую необходимо сохранить как текстовый файл с именем KTL.TXL.!!!!

Для этого выбираем режим Сохранить как и пишем в окне Имя файла - KTL.TXL , а в окне Тип файла - Текстовые файлы (с разделителями табуляции).

Расчеты коэффициентов новой шкалы

Вот и готов наш файл.

Формирование новой шкалы в системе

Поскольку порядок ввода новой шкалы подробно описан в Руководстве пользователя, мы не будем его еще раз подробно описывать.

Можно лишь добавить, что, придумывая обозначение новой шкале, следует иметь в виду, что система сама сортирует шкалы в тесте и следует выбирать буквы и знаки кода с учетом того, куда вы хотите поместить новую шкалу.

В нашем случае, мы дали код SM по двум причинам. Первая – это сокращение слов социальная мобильность, а вторая – наша шкала будет располагаться последней в списке шкал, что для нас более удобно.

Формирование новой шкалы в системе

После этого нам необходимо добавить в тест новые коэффициенты для новой шкалы. Сделать это можно двумя способами.

В первом случае, можно просто с распечатанного листа ввести коэффициенты в тест вручную. Открыв из основного окна теста список вопросов теста (F3), нужно будет перебрать все вопросы и ответы теста, вводя вручную соответствующий коэффициент. По окончании работы, рекомендуется вывести новую таблицу текущих коэффициентов в файл KTL.TXC (см. выше) и после этого сравнить ее с вводимой таблицей (проверить возможные ошибки). Это наиболее простой, но и наиболее затратный по времени способ.

Во втором случае, можно ввести коэффициенты в тест заново, все сразу, используя файл KTL.TXL как файл для импорта. Но это более сложный способ, так как требует определенного опыта работы с системой и дополнительных программных средств.

Для этого необходимо сначала провести корректировку в файле KTL.TXL. Дело в том, что таблица, сохраненная в файле программой Excel, имеет шаг между столбцами 8 позиций (размер табуляции), 

Формирование новой шкалы в системе
  |                    |  
 
  123456789

а для использования в системе "Профессор"/"Профессор-кадры" нам нужна таблица с шагом 6.

Формирование новой шкалы в системе
  |               |
  
1234567

Для проведения корректировки следует использовать доступный редактор для файлов DOS, в котором можно будет передвинуть столбцы и уменьшить шаг с 8 позиций до 6.

Мы, обычно, используем старый редактор Лексикон для DOS, в котором есть "уникальная" возможность выделять в виде блока, так называемый "прямоугольный" фрагмент текста, который включает и символы и пробелы. С помощью выделения и удаления таких прямоугольных блоков между столбцами, очень легко их сдвигать целиком, убирая лишние 2 пробела сразу во всей таблице с первой строки до последней.

После этого, сохраняем скорректированную таблицу в файл KTL.TXL.

Для проведения импорта коэффициентов в тест сначала следует удалить из системы файлы, содержащие информацию о старой таблице коэффициентов теста Кеттела. Для этого нам следует удалить файлы коэффициентов теста Кеттела - KTL_CF.DAT и KTL_CF.K01.

ВНИМАНИЕ!

Случайное удаление других файлов, в том числе и с индексом KTL может привести к нарушению работоспособности системы. Поэтому выполняйте эту операцию аккуратно, по принципу СЕМЬ РАЗ ОТМЕРЬ – ОДИН РАЗ ОТРЕЖЬ.

 

Итак, после удаления файлов система готова к импорту коэффициентов из внешнего файла.

Сначала копируем наш новый файл KTL.TXL в папку, где расположена тестовая часть системы "Профессор"/"Профессор-кадры".

Затем, снова открываем в Конструкторе тестов окно теста Кеттела и запускаем режим импорта клавишей F5.

Сначала появляется окно

Формирование новой шкалы в системе

нажимаем далее Enter и получаем сообщение о том что информация из файла KTL.TXL загружена

Формирование новой шкалы в системе

По окончании работы, как и первом случае, рекомендуется вывести новую таблицу текущих коэффициентов в файл KTL.TXC (см. описано выше) и после этого сравнить ее с вводимой таблицей из KTL.TXL (проверить возможные ошибки).

Правила пересчета сырых баллов в стандартные для новой шкалы

Как и предыдущей части, мы не будем еще раз подробно описывать порядок ввода правил пересчета сырых баллов в стандартные для новой шкалы, они также подробно описаны в Руководстве пользователя.

Следует лишь добавить, что прежде чем вводить правила в систему "Профессор"/"Профессор-кадры" необходимо внимательно отнестись к формированию самих правил пересчета.

Дело в том, что у большого количества тестов для каждой шкалы существуют свои правила пересчета. И в этом случае необходимо предварительно рассчитать эти новые правила.

Так в нашем примере шкалы имеют следующие правила пересчета.

Код шкалы

Название шкалы

Диапазон

Точки интерполяции

1A

общительность

0.0/20.0

0

2.5

5.5

8.5

10,0

7H

застенчивость - уверенность

0.0/26.0

0

3.8

5.8

8.3

10,0

Q1

консерватизм - радикализм

0.0/20.0

0

2.0

6.0

9.2

10,0

SM

социальная мобильность

0.0/66.0

0

3,0

5,8

8,7

10,0

Из таблицы видно, что для новой шкалы диапазон будет иметь значения от 0 до 66 баллов (сырых), а точки интерполяции можно на начальном этапе можно выбрать как средние.

Кроме этого, необходимо отметить, что после проведения тестирования и накопления статистики по этой шкале следует оценить особенности распределения новой шкалы и при необходимости скорректировать точки интерполяции.

Вот, пожалуй, и все, можно работать. Остается только проверить работоспособность новой шкалы и продумать для нее тексты интерпретаций, которые потом можно использовать при работе с тестом.

Автор статьи:

Владимир Сергеев, Игорь Ниесов