Краучер Мурлин

Перевод в электронный формат текста и создание сайта в Интернете "Летописи журнальных статей" советского периода (1956-1975 гг.)

Перевод в электронный формат текста и создание сайта в Интернете "Летописи журнальных статей" советского периода (1956–1975 гг.)

Представленный Murlin Croucher

Конференция Пятых Международных Славянских Библиотекарей В Таллинне, Эстонии, 26–28 июля 2000.

Библиотекарям-славистам и исследователям хорошо известно, что одним из серьезных препятствий в использовании советских журналов является их труднодоступность. Летопись журнальных статей является русскоязычным эквивалентом американского "Reader's Guide to Periodical Literature", немецкого "Internationale Bibliographie der Zeitschriftenliteratur aus allen Gebieten des Wissens" и подобных им массивных компиляций, представляя собой библиографический указатель советских периодических изданий.

Данный библиографический источник нуждается в улучшении по нескольким причинам. В США его имеют около 16 университетских библиотек, причем не одно из их собраний не является полным. Качество бумаги, на которой напечатан текст Летописи, ужасно. Большинство ранних выпусков вплоть до 50х-60х годов очень хрупкие и не поддаются восстановлению. Необходимо также отметить, что к данному библиографическому указателю, в его наиболее полном виде, ежегодно составлялось еще четыре указателя, организованных по таким классификационным признакам как "автор" и "географический регион". Пользователи Летописи вынуждены были обращаться к еженедельным выпускам в случае, если квартальные указатели в требуемом году не выпускались, а также при необходимости поиска по предмету или названию. Таким образом, поиск нужной ссылки по предмету или названию в Летописи за двадцатилетний период требовал от исследователя внимательного просмотра 1040 выпусков. Такая "технология" поиска не отвечает современным требованиям, так как является чрезвычайно трудоемкой, и проигрывает по сравнению с возможностью исследования с использованием компьютера и таких систем баз данных как Lexus-Nexus, MLA или ABSEES.

Альтернативным методом работы с библиографическими указателями было нахождение ежегодного перечня опубликованных статей конкретного журнала по тематике исследований ученого. Для этого необходимо было убедиться в том что библиотека имеет данное наименование журнала, но и это не решало задачу, поскольку трудно было угадать, в каких журналах можно найти статьи по интересующему читателя предмету. Данный способ работы также является неэффективным с точки зрения затрат времени.

Сказанное выше обосновывает необходимость решения проблемы улучшения доступа к советским периодическим изданиям. Определенные шаги в этом направлении были сделаны компанией "Краус Репринт", которая перепечатала большинство ранних выпусков Летописи. Перепечатка позволила увеличить количество библиотек, имеющих в своих фондах Летопись, а также сохранить информацию, которая содержалась на хрупких, практически непригодных к использованию бумажных носителях. Было также предложение отснять данный библиографический источник на микрофильм. Работать с бумажным оригиналом Летописи достаточно сложно, использование микрофильма сделает текст еще менее "читаемым".

Мы продолжаем недоиспользовать огромный объем информационных ресурсов из-за трудностей доступа к советским периодическим публикациям, даже в случаях, когда метод исследования достаточно прост и состоит в просмотре названий статей по изучаемому предмету, например, по теме “Анализ изменений в советской теории образования”, или если задачей исследователя является выяснение, было ли масонство запретной темой, в чем можно легко убедиться, видя отсутствие публикаций по данной теме.

Однако, появилась возможность изменить ситуацию.

Американский Департамент Образования объявил о своем желании профинансировать проекты, которые сделают зарубежные информационные источники более доступными. Поддержка предназначается неанглоязычным исследовательским материалам, труднодоступным в США или в стране, в которой они издавались. Временное ограничение для проектов — три года, бюджетное — 100000 долларов в год. Заявка на финансирование и план работы должны были быть написаны за несколько месяцев — обоснование идеи, описание этапов проекта, ведущих к достижению цели, и постатейная разбивка затрат. Поскольку в проект были вовлечены достаточно большие денежные средства, получение гранта по данной программе считалось престижным, что породило высокую конкуренцию на национальном уровне.

В университете Индианы я представил свои идеи комиссии, которая состояла из представителей пяти центров изучения других стран. Вкратце мой план состоял в переводе в электронный вид как можно большего количества выпусков Летописи журнальных статей за три года работы, что позволило бы пользователям знакомиться с ее текстом в машинном формате. Оцифровка позволит остановить процесс разрушения Летописи, которая в настоящее время превращается в пыль на библиотечных полках. Кроме того, от Крис Бранколини и Перри Уиллетта, экспертов в данной области, я узнал, что мы можем произвести кодировку электронного варианта Летописи таким образом, что станет возможным мгновенное нахождение пользователем необходимых ссылок в достаточно большом временном промежутке по таким поисковым критериям как “автор”, “название статьи”, “предмет”, “название журнала”, “дата выпуска”, и, пожалуй, самому важному критерию — “ключевое слово”. По завершении трудоемкого процесса перевода текста Летописи в электронный формат и его кодировки станет возможным помещение этого крупного источника библиографической информации в Интернете. Доступность данной системы на международном уровне позволит пользователям любой страны мира воспользоваться содержащейся в ней информацией, для чего им будет достаточно подключиться к Интернету.

Комиссия приняла мое предложение, группа специалистов из университетской библиотечной системы подготовила и подала заявку в правительственное агентство. Мы также опросили библиотекарей- славистов со всей страны, одобряют ли они наше предложение, и к всеобщей радости и облегчению, большинство опрошенных специалистов подтвердили необходимость и полезность проекта. Успеху данного предприятия призваны способствовать следующие обстоятельства. Во-первых, в университете Индианы существует одна из крупнейших в США программа славянских исследований, история которой ведется с конца 1940-х годов, когда доктор Бернс основал систему целевого федерального финансирования программ изучения зарубежных стран в американских университетах, которая в настоящее время носит название Title IV. Данная программа обеспечивает деятельность Славянского института университета Индианы, который в настоящее время может предоставить нам квалифицированных специалистов, владеющих двумя языками, для работы по проекту. Во-вторых, Университетская библиотечная программа создала в своей структуре специальное подразделение, LETRS, для работы с электронными информационными ресурсами, в частности с электронными текстами литературного и музыкального содержания. Для работы по проекту предполагалось задействовать специалистов данного подразделения, умеющих переводить тексты в цифровой формат, производить кодировку этих текстов при помощи языков HTML и XML, и при необходимости создавать оригинальные программные системы. И в- третьих, библиотека университета Индианы имеет почти полную коллекцию Летописи. Предложение было принято, и мы получили грант на три года, предполагающий финансирование в объеме 80000 долларов в год с целью перевода в электронный вид Летописи журнальных статей за период в двадцать лет, XML- кодировки текста и помещения данной информации на сайте в Интернете. Пришло время действовать.

В результате ряда интервью для руководства проектом был приглашен г-н Эндрю Спенсер. Он объявил конкурс и проинтервьюировал 17 кандидатов, работа которых заключается в корректировании и кодировании текста. Предполагалось, что каждый из пяти отобранных человек будет работать двадцать часов в неделю. Нам не хватало выпусков за один год и один месяц из двадцатилетнего периода Летописи, подлежащего обработке, поэтому нам пришлось позаимствовать данные экземпляры в университете Иллинойса с условием, что мы предоставим им замену в обновленном виде в твердом переплете. Принимая во внимание финансовые и временные ограничения проекта, мы приняли решение передать часть работы, связанную с переводом текста в электронный формат, частной компании. Менеджер проекта, г-н Спенсер, установил контакт с семью компаниями, выслал им образцы материала, подлежащего обработке, и получил от них их варианты обработки текста с обоснованием стоимости работы.

В результате отбора было принято решение заключить контракт с компанией Northern Micrographics. Поскольку используемые технологии работы с бумажными оригиналами Летописи не позволяют привести их по окончании проекта в первоначальный вид, мы стараемся сохранить всю содержащуюся на них информацию в полном объеме. На сегодняшний день мы имеем первые восемьдесят тысяч страниц текста в электронном формате, и откорректированный электронный текст Летописи за один год. В ходе работы г-н Спенсер обучил пять сотрудников XML-кодированию текста.

Проблемы, связанные с данным проектом, многочисленны и сложны. Первая трудность заключалась в выборе метода сканирования, поскольку бумага, на которой напечатан текст Летописи, хрупкая и пожелтевшая. После нескольких проб было принято решение сканировать материал в двухтональном режиме, а не с 12-битовой серой шкалой изображения, что облегчило сканирование и сократило объем памяти, необходимой для сохранения файлов. В соответствии с этими параметрами мы разослали предложение подать заявки на участие в проекте на этапе сканирования семи компаниям. Очень скоро мы поняли, что необходимо поддерживать высокоинтенсивный режим работы, поскольку проект предполагает обработку приблизительно 250000 страниц обесцвеченного текста, напечатанного мелким шрифтом. Другая трудность состояла в обучении нанятых студентов без нарушения нормального режима их работы. Их работа требует большой тщательности и состоит во внимательном прочтении электронного изображения страниц текста, соответствие которых оригиналу после сканирования должно составлять 99,8 %, проверке соблюдения правил пунктуации, последовательности номеров ссылок, правильности дат выпуска периодических изданий и т. д. Компьютерная программа OCR (Оптического распознавания символов), рассчитанная на кириллицу, не справляется с такими специфическими проблемами как правильное прочтение математических символов, ссылок в разделах о флоре и фауне, насыщенных латинскими названиями. В числе прочих проблем следует упомянуть разгадывание многочисленных сокращений, используемых в библиографических ссылках, а также отличение слов с дефисом от случаев переноса части слова на следующую строку. Все упомянутые сложные случаи должны редактироваться вручную. Значительное количество ошибок при использовании OCR связано с низкой степенью точности распознавания этим программным продуктом случаев употребления греческих и кириллических букв.

Много времени ушло на принятие решения, какие элементы текста должны подвергнуться кодированию. После пяти итераций, рабочая группа решила создать DTD (Определение типа документа) из 14 элементов. Однако, после подсчетов стало ясно, что при такой степени детализации кодировки необходимо будет закодировать 30000000 различных элементов текста. Первоначально предполагалось, что XML-модуль Word Perfect Office 2000 Suite успешно справиться с этой задачей, однако в ходе работы г-н Спенсер пришел к необходимости перехода на новую версию XMetaL.

Следующей серьезной проблемой стал выбор поисковой системы, которая обладала бы чертами универсальности, в частности, позволяла бы производить поиск по латинским и кириллическим текстам. На сегодняшний день выбор пал на Tamino Software A-G, созданную немецкой компанией, имеющей дочернюю компанию в США.

Г-н Спенсер и технические исполнители проекта озабочены проблемой обеспечения доступности материалов Летописи в будущем, поскольку мировые компьютерные технологии динамично развиваются. Им удалось заключить соглашение с UITS (Отдел информационно-технических услуг университета Индианы) на поддержание базы данных Летописи в рабочем состоянии и перевод ее в новые компьютерные системы по мере всеобщего к ним перехода. Таким образом, мы надеемся обеспечить сохранность этой массивной библиографической базы данных в долгосрочном периоде.

В настоящее время мы рассматриваем возможность сохранения информации на CD-R дисках. Использования этого носителя информации повлияет на выбор поисковой системы, поскольку она должна успешно функционировать как на CD-R дисках, так и в режиме on-line, при загрузке с домашней страницы в Интернете.

Осуществление данного проекта в трехгодичный срок представляется почти невозможным. Однако, мы уже далеко продвинулись вперед. Мы надеемся, что преодоление проблем, с которыми мы столкнулись в ходе реализации проекта, и которые мы успешно решаем, облегчит путь тем, кто продолжит после нас работу над этой идеей, улучшая доступ пользователей всего мира к другим частям этой национальной библиографии, а также к национальным библиографиям стран Содружества Независимых Государств.

Цитата:

Croucher, Murlin. Digitizing and Making a Web Site for the Soviet Letopis' Zhurnal'nykh Statei, 1956–1975. Libraries in Open Societies: Proceedings of the Fifth International Slavic Librarians' Conference (July 2000).

Перевод:

Переведенный с Английского языка Natalia Rome-Lindval

Content

Краучер Мурлин Перевод в электронный формат текста и создание сайта в Интернете "Летописи журнальных статей" советского периода (1956-1975 гг.)

Перевод в электронный формат текста и создание сайта в Интернете "Летописи журнальных статей" советского периода (1956–1975 гг.) Представленный Murlin Croucher