|
О работе с Конструктором тестов
В нашем вузе принято решение перейти на автоматизированное тестирование
студентов по предметам. Для этого года полтора или два назад куплена программа,
за полтора мильона. Начиная с осени 2005 года нас начали заставлять ее
использовать для заполнения тестовой системы. Впервые попробовал поработать
01.11.2005 года. Работало. Чуть позже сел заполнять...
О программе:
Конструктор тестов адаптивной среды тестирования АСТ
Copyright 1999, Т.Тягунова и др.
Патент ФИПС N990474
Версия 1.11.97
Тел/Факс 246-26-64
ttn@newmail
cct@staff.mesi.ru
Первые впечатления не очень хорошие. Я ощутил себя дураком. Помощь при
нажатии F1 не появляется, в меню - серые пункты (много позже, уже в конце
января, мне сказали, что помощь в данной системе есть, однако не показали),
что и как вводить не вполне ясно.
Следующее замечание - странные пиктограммы для "быстрых кнопок". Они
какие-то самопальные, мало на что похожие, как будто не из Windows. Windows
во многом не так хороша, как хотелось бы, но интерфейс уже привычен...
Следующее - при попытке нажать на кнопку "Выход" - там так надо в НАЧАЛЕ
заполнения базы данных вопросами - появилось сообщение
"Ошибка создания БД Теста = 429
ActiveX component can't create object"
И на выбор - две кнопки - OK и Отмена. Как вскоре выяснилось, результат
выбора ни на что не влияет, реакция программы одинакова:
"Конструктор тестов 2000
Run-time error '91'
Object variable or With block variable not set"
и работы программы завершается.
К удивлению обнаружил то же самое на обеих доступных мне кафедральных
машинах.
Через некоторое время переустановили. Кстати, в отделе СибГТУ, управляющем
тестовой работой с Help'ом мне не помогли. (Наталья Владимировна кое-что мне
посоветовала, однако, такие ошибки у них не встречались).
2005.01.07 снова начал пытаться заполнять и сразу записывать
Замечания при заполнении теста по ОЭВМ:
1) НЕ ПОКАЗЫВАЕТ номер вводимого вопроса и его содержание
2) автоматически устанавливает CheckBox, в то время как мой тест рассчитан на
RadioButton
Кстати, некоторые авторы считают, что использование нескольких правильных
ответов (и CheckBox, следовательно) существенно затрудняет отвечающего, даже
при наличии знаний. По себе замечал - по сертификации на МВТУ - предпочел
сервер BrainBench, лучше на АЯ, но разумно
3) не нумерует ответы (для вводящего их!)
4) очень сложно ввести данные, притом что есть готовый файл!!!
надо садиться и вводить по одному варианту ответа
Программисту надо руки оборвать - не написать системы считывания простых
по структуре тестов из готового файла
5) "Формулировка задания" - не сразу догадался, что ее просто не надо
трогать
6) Мастер тестового задания обычно начинает свою рбту со 2 шага и завершает
на 5 шаге из 6. Притом, что шаг 5 появляется дважды, как бы после шага 6,
вместо 7 шага!?
И это как будто так в системе и надо, но сколько сомнений вызывает у
пользователей
7) детский интерфейс. Сделано, как будто не собирались продавать вообще, или
знали, что купят независимо от качества;
пиктограммы совершенно неясны, хотя и большого размера - самопальные;
цвета нормальны, но этим сейчас не удивишь;
а вот много углов, пустого места;
детская угловатость, как у ребенка или подростка, который еще не вырос
8) клво вариантов ответов не ограничивает, но видно при самом приличном формате
экрана только 7 вариантов ответов (иногда 5).
Редактированием высоты, которое частично обеспечено в программе, удалось
уменьшить высоту и выложить до 9 ответов
(в одну колонку, естественно, т.к. 2-3 колонки - маразм!)
Однако, при вводе 13 вариантов они никак не видны в одну колонку.
Кстати, позже, при тестовой проверке встретился вопрос, по которому ввел 6
вариантов ответов. Система задала мне 5 вариантов, БЕЗ правильного и сказала,
что я ошибся! Это напомнило мне систему обучения ФЯ
9) при выборе другой схемы расположения - в 2 колонки - обрезает снизу часть
одного из вариантов ответов так, что прочитать уже невозможно, можно только
догадаться, если сам составлял!
Один раз так и для 5 вариантов ответов сделала!
Вывод: система не контролирует видимость вариантов ответов
10) есть пункты "Восстановить системные параметры",
"Восстановить сохраненные параметры"
однако - какие параметры можно сохранить и восстановить - нигде не сказано!
На всякий случай просто не проверял, слишком уж много загадок, как бы чего
невзначай не обрушить!
11) Установка шкалы отметок:
по умолчанию 3 - начиная с 25%, а 4 - начиная с 50% (!!!)
требуется вручную перетащить движок; к счастью, показывает до десятых процента
получившее значение, но как подогнать на небольшой шкале тысячные доли?!
Практически невозможно точно
Почему бы не сделать было ввод точных границ в поле?!
(кстати, позже оказалось, что введенная ДО ввода вопросов шкала исчезает,
ее надо ПОСЛЕ вводить).
12) "Пробное выполнение тестового задания" при числе ответов более 5 иногда не
показывает правильный ответ!
13) Как удалить тестовое задание, по ошибке введенное в другую тему?
Я сумел только удалить вместе с темой, а потом тему создать заново. Однако,
этот способ годится только в начале, а если уже много введено?
14) не нашел простого способа редактировать содержание вопросов и ответов
15) на заполнение всех вопросов потратил время с 16 до 20:15. Напоминаю,
что у меня был готовый файл из которого я просто перетаскивал по одному и
расставлял по местам!
Возможно, часть моих претензий как-то разрешима, но мне забыли об этом сказать.
В ходе обсуждений доцент Якимов С.П. предложил мнение, что эта система стоит
30-60 тысяч, если ее сопровождать.
Доцент кафедры ИТ СибГТУ Жуков Л.А.
22.01.2006
|