Верификация (редактирование)

 

Для того, чтобы начать редактирование результатов распознавания, следует открыть первый бланк пакета при помощи клавиши "Enter" или двойного щелчка левой клавишей "мыши". Появятся три окна, два из которых - части обрабатываемого изображения, третье (справа) - форма, в которой отображен распознанный текст. Процесс редактирования заключается в том, чтобы сверить распознанный текст с данными бланка ответов. В том окне, в котором отображается распознанный текст, переход от одного поля к другому осуществляется с помощью клавиши "Tab" (вернуться к предыдущему полю можно при помощи одновременного нажатия клавиш Shift и Tab). Передвигаясь от одного поля к другому в окне, содержащем распознанный текст, изображение в двух других окнах будет меняться, показывая соответствующие распознанному тексту поля бланка. Все, что распознано неверно, следует исправить в соответствии с данными на бланке ответов.

Проверять следует все поля с 1-ого до чекбоксов (если предметом предусмотрено заполнение полей "С"). Если же заполнение этих полей не предусмотрено, проверку следует закончить после редактирования полей отмены ошибочных меток.

Далее следует проверить неуверенно распознанные символы на данной странице, для чего нужно нажать на клавишу "F4", после данной операции программа или покажет ближайший неуверенно распознанный символ, или предложит "Перейти к следующим страницам?". В случае появления неуверенно распознанного символа, нужно его исправить при необходимости и, воспользовавшись клавишей "F4", перейдите к следующему неуверенно распознанному символу. Если программа выдала "Перейти к следующим страницам?" следует ответить "Нет" (т.к. Вам необходимо проверить поля следующей страницы). Для перехода к следующей странице нажмите одновременно клавиши "Ctrl" и "+" (клавиша "+" расположена на правой части клавиатуры с краю, нельзя использовать другие "+"). Открыв следующую страницу, повторите действия, описанные выше в этом разделе.

После завершения редактирования всех бланков ответов данные необходимо экспортировать в CSV-файл. Для этого в меню "Файл" выбрете "Экспорт в файл". Далее откройте папку, где будет храниться экспортируемый файл, а в поле "Имя файла" укажите название файла – название пакета бланков ответов. В поле "Тип файла" укажите "CSV файлы", а в поле "Какие страницы сохранять" обозначьте "Все распознанные". В поле "Как сохранять страницы" не забудьте указать "Все страницы в один файл", после чего можно нажать кнопку "Сохранить".

Проверка CSV-файлов

 

Для проверки корректности заполнения бланков ответов и редактирования результатов распознавания Вам следует открыть программу "Проверка CSV-файлов". Чтобы запустить эту программу выполните следующие действия: в меню "Пуск" выбрете "Программы", "Test Office", "Проверка CSV-файлов". Появится окно программы, в нем для начала проверки щелкните мышкой на кнопку "Проверить файл". Появится окно "Открытие файла". После чего укажите на только что экспортированный CSV-файл и нажмите "Открыть". В результате проверки появится протокол "Viewer" - являющийся протоколом ошибок распознавания и редактирования. Дальнейшая работа заключается в исправлении ошибок, отраженных в окне "Viewer". Для этого, не закрывая окна "Viewer", в программе "FineReader" необходимо открыть обрабатываемый пакет. В пакете откройте то изображение, номер которого указан в окне "Viewer", и исправьте некорректность, указанную в протоколе "Viewer". После исправления всех некорректностей на данной странице, закройте ее и перейдити к следующей. Для перехода в программе "Viewer" к протоколу следующего изображения Вам потребуется нажать синюю стрелку на панели инструментов программы. После завершения проверки и исправления всех ошибок во всех изображениях необходимо заново экспортировать файл так, как это было описано ранее, а окно "Viewer" закрыть. Затем снова проверить с помощью программы "Проверка CSV-файлов" полученный CSV-файл так же, как ранее, чтобы убедиться, что не осталось неисправленных ошибок. Если ошибки остались, то нужно опять, опираясь на протокол "Viewer" исправить все неточности, затем экспортировать и проверить еще раз. Операции исправления ошибок, экспортирования и проверки следует повторять до тех пор, пока программа проверки CSV-файлов вместо протокола "Viewer" не выдаст сообщения о том, что ошибок не обнаружено.

                                    

Ручной ввод

 

Данная программа позволяет работать без использования процесса сканирования (т.е. без сканера) посредством ручного ввода данных с бланка ответов. В нашем случае, если какой-либо бланк ответов плохо отсканирован или заполнен светлыми чернилами, рекомендуется вводить данные, содержащиеся в этом бланке при помощи программы "Ручной ввод". Для открытия этой программы следует зайти в меню "Пуск", выбрать "Программы", "Test Office", "Ручной ввод". В программе "Ручной ввод" в первую очередь укажите название предмета в поле "Предмет", в поле "Вид тестирования" - вид данного тестирования. Затем введите все заполненные в бланке поля, обведенные синим контуром при попадании на них курсора, в соответствии с данными в бланке ответов. Переход от одного поля к другому осуществляется при помощи клавиши "Enter" либо "Tab"; возврат - при помощи одновременного нажатия клавиш "Shift" и "Tab". После ввода всех необходимых данных одного бланка, для перехода к следующему нажмите на кнопку "Добавить", расположенную на панели инструментов программы. Для сохранения всех данных необходимо воспользоваться пектограммой - "Дискета" (значком на панели инструментов). Если файл с введенными данными еще не был сохранен, то появится диалоговое окно для сохранения файла. Сохраняя, следует дать файлу имя, построенное по алгоритму имени пакета, указанному выше.

После окончания ввода данных необходимо проверять корректность заполнения бланка, для чего нужно нажать на панели инструментов кнопку "Проверить". Если найдутся какие-либо ошибки, появится окно проверки "Viewer", которые следует исправить. После исправления всех ошибок закройте окно "Viewer" и снова нажмите на кнопку "Проверить". Эти операции необходимо повторять до тех пор, пока не появится сообщение "Ошибок не найдено".

 

Для облегчения работы с программой, рекомендуется пользоваться следующими клавишами:

- "Ctrl" + "A" - для добавления нового бланка в данный пакет;

- "Ctrl" + "D" - для удаления бланка из пакета;

- "Ctrl" + "+" - для перехода к следующему бланку ("+" на правой панели клавиатуры);

- "Ctrl" + " - " - для перехода к предыдущему бланку (" - " на правой панели клавиатуры);

- "Ctrl" + "S" - для сохранения изменений;

- "Ctrl" + "N" - для открытия нового пакета;

- "F6" или "Shift" + "F6" - для перехода между окнами программы (от списка бланков к бланку и наоборот).

 

По завершению всех проведенных операций можно отправлять CSV-файл в Информационно-вычислительный центр Центра тестирования Министерства образования Российской Федерации при помощи программы "Отправление CSV-файлов", которую следует запустить, выбрав в меню "Пуск", "Программы", а затем в "Test Office" найти "Отправление CSV-файлов".

Проверку для CSV-файлов необходимо проводить, т.к. в случае обнаружения некорректностей, программа "Отправления CSV-файлов" не отправит файл в Центр тестирования.

VI. Недочеты программного продукта «Тест Офис»,

выявленные при технологической обработке бланков

Единого Государственного Экзамена

Июнь 2001 год

Якутия

        

№	В программе	Как должно быть		Примечание, пример
Ввод части «С»
1.	Программа ввода результатов проверки части «С» требует ввода пункта тестирования, номер протокола, в актах проверки, разработанных Центром Тестирования МО РФ, этого не указано	Необходимо в актах проверки Части «С» ввести графы пункт тестирования, № протокола, который заполняется председателем ГЭК при сдаче оператору, ответственному за ввод части «С»		При вводе результатов первого экзамена было сложно сориентироваться, т.к. в актах не были указаны соответствующие кодировки, много времени потрачено, чтобы поднять документы и проставить эти кодировки.
2.	При вводе части «С» в программе всегда показано с первого протокола, т.е. отсутствует нумерация на экране.	Должна быть показана последняя запись, чтобы оператор мог визуально проверить правильность ввода.		Приходилось перетаскивать на последнюю строку при каждом случае, если возникали сомнения по правильности ввода результатов. Затрачивается слишком много времени.
3.	Заранее не известно количество баллов разрыва в каждом предмете, более которого программа не пропускает, запрашивает третьего эксперта.	В инструкции по каждому предмету необходимо указать разрыв количества баллов, в результате которого необходим третий эксперт		Пришлось возвращать протоколы ГЭК и ждать результатов проверки третьим экспертом.
4.	Программа не пропускает ошибочный ввод номера бланка, если ученик ошибся в 1 цифре, его работа не оценивается	В данном случае программа должна спросить «Вы действительно хотите оставить 6 цифр в номере бланка?», тогда проверяющие в Москве легко найдут ошибку при заполнении		После проверки в Москве 2 работы было легко определить
5.	В инструкции не указано, каким образом производится проверка одной и той же работы двумя преподавателями	Либо разные пасты проверки, что уже не говорит об объективности, либо ксерокопирование работы		Особенно сложности возникают с русским языком, где мнения проверяющих наиболее разделяются
Распечатка протоколов с результатами проверки
6.	Результаты проверки выкладываются в «неизвестную школу», определен район, определена школа		Либо распечатка должна выдаваться по пункту тестирования, что разумно, ведь все сцеплено с пунктом тестирования и CSV-файл и ввод части «С», либо не надо учитывать ошибки при заполнении других областей, а оставить только «регион» и «код школы», легче будет заполнять бланки и не будет нагромождения кодировок		12 человек из Абыйского улуса попали в определение «неизвестная школа» при абсолютно правильном заполнении данных областей
7.	Распечатка по школам не эффективна, много файлов, кодировок.		Лучше протоколы формировать по пункту тестирования, заложив в программе «фильтры» по школам, в каждом пункте тестирования будет легко определить своих учащихся.		Если есть хотя бы одна ошибка при заполнении многочисленных кодировок, результат определяется в неизвестную школу, район не определен.
Сканирование, редактирование, отправка готовых CSV-файлов
8.	При сканировании и распознавании цифра 7 воспринимается как 1, в номере теста.		Номер теста, вбиваемый типографским способом должен соответствовать образцу на бланках ответов.		При ошибке в номере теста, результат становится заведомо отрицательным.
9.	При распознавании шаблон накладывается неправильно.		Пересмотреть шаблон.		Обрезается первая буква или цифра во всех полях заполнения.
10.	В файле Report.txt не зафиксирована отправка некоторых пунктов.		Необходима фиксация всех отправлений.		Файл 140203461 был отправлен, но не зафиксирован, хотя результаты с оценками есть. Улус сам не обрабатывал.
11.	При отправке CSV-файла программа Post Man выкидывает из него записи.		Необходимо запретить отправку файла с ошибкой, до полного устранения таковой, либо сделать уведомление об удалении записей.		При отправке файла (Нерюнгри) были удалены записи двух человек.

 

VII. Рекомендации

1. Инструкции и документы по проведению Единого Государственного Экзамена необходимо высылать в регионы заранее для организации полноценного, длительного и тщательного обучения всех необходимых специалистов, задействованных в ЕГЭ.

2. Разработка КИМов требует более длительной апробации и проверки. В случае с тестами по физике (I этап) дети на экзамене находили опечатки и неверные формулировки заданий.

3. Продумать транспортную схему доставки бланков из труднодоступных районов, задействовать специальные средства авиации.

4. Экзамены проводить в один этап.

5. Усовершенствовать программную оболочку с учетом возникших ошибок.

6. Исключить выходные и праздничные дни из расписания ЕГЭ.

 

В заключение хотелось бы отметить, что, не смотря на трудности, возникшие во время проведения ЕГЭ (а без этого и быть не могло, так как все впервые, и технологически, и психологически), в целом, по республике организация и технологическое сопровождение прошли успешно.

Хотелось бы поблагодарить всех, кто работал по ЕГЭ и лично министра образования Республики Саха (Якутия) Е.И.Михайлову за ее дальновидность и возможность своевременного приобретения сканирующего оборудования для всех улусов республики.

    Сегодня Республика Саха (Якутия) первая в России «прочувствовала» на себе современную технологию обработки и передачи данных на расстоянии через Интернет при проведении ЕГЭ.

 

    Во время проведения ЕДИНОГО Государственного Экзамена в ЕДИНОЙ упряжкеработали Министерство образования Российской Федерации, Центр Тестирования МО РФ, Министерство образования Республики Саха (Якутия), Государственный Комитет по науке, высшему и среднему профессиональному образованию, Республиканский Центр Новых Информационных Технологий МО РС(Я), Центр Аттестации и Контроля Качества Образования РС(Я), Якутский Государственный Университет им. М.К.Аммосова, Якутская Государственная Сельскохозяйственная Академия, Улусные Управления Образования, школы и гимназии, все работники образования.