Современные технологии для оцифровки библиотечных фондов Андренюк Вадим Анатольевич Ведущий менеджер департамента по работе с библиотеками и вузами
Корпорация «Электронный Архив» 2009 МИССИЯ: Создание глобальных информационных ресурсов Общества и Государства Крупнейшее специализированное предприятие по созданию информационных ресурсов и оснащению специализированных архивных центров 2 500 сотрудников Промышленный центр сканирования и ретроконверсии Ведущий поставщик и центр сервисной поддержки оборудования для конверсии и архивации документов Практически все крупные проекты по оцифровке книг и документов в России за последние годы прошли с участием Корпорации “Электронный Архив”
«Электронный архив» - крупнейший в Европе центр обработки документов ■ Более 10 тыс. кв. м. производственных площадей ■ 200 единиц профессиональной техники ■ 15 производственных площадок: Москва Санкт-Петербург Тверь Тюмень Тобольск Алматы (Казахстан) ■ Собственные уникальные технологии массовой оцифровки, ретроспективной конверсии и массового заимствования записей, создание информационно-поисковых систем ■ Текущая загрузка производства – более 7 млн. документов в месяц ■ Обработано более 250 млн. документов 3
Основные направления деятельности Корпорации в библиотечной отрасли и образовании: 1. Участие в Национальных проектах, федеральных и региональных целевых программах 2. Разработка и реализация комплексных программ информатизации объектов культуры и образования 3. Разработка и реализация комплексных решений 4. Создание электронных ресурсов - электронные каталоги - электронные коллекции - электронные библиотеки 5. Поставка и сервисное обслуживание специализированной техники
Качественный электронный ресурс – массив графических образов, полученный путем перевода в электронный вид (оцифровки) исходных материалов Заказчика, полностью удовлетворяющий предъявляемым Заказчиком требованиям для дальнейшего целевого использования Основные требования, предъявляемые к электронным ресурсам библиотек (при оцифровке книг) ¢ Строго упорядоченный выходной массив образов ¢ Аутентичность графических образов оригиналу ¢ Отсутствие дублей, пропусков, образов с частичной потерей информации, геометрическими искажениями ¢ Пригодность электронного ресурса для использования в программах просмотра в читальных залах, интернете и т. п. , а также в качестве сохранных копий
Этапы создания электронного ресурса
Сканирование любых типов документов Разнообразные форматы документов: от А 6 до А 0+ Различные бумажные носители (бумага разной толщины, кальки, синьки, ватман и др. ) Документы в плохом состоянии (ветхие, загрязнённые и т. п. ) Сканирование карточных каталогов и расшитых документов Сканирование сшитых документов и книг Сканирования фотоизображений Сканирование микроформ Высококачественное сканирование Сканирование объемных объектов
Создание строго упорядоченного выходного массива графических образов ¢ Структурирование исходных материалов: ¡ Разделение исходных материалов на партии и ящики, привязка каждой книги к ящику ¡ Исходный осмотр каждой книги с описанием физических дефектов, присвоение идентификационного номера — штрих-кода ¡ Сопровождение книги маршрутным листом автоматическая идентификация по штрих-коду ¡ Использование специализированного программного обеспечения слежения за движением исходных материалов: базы данных реестра сканирования материалов ¢ Использование АСУ промышленного сканирования ¡ Сохранение подробной истории работы с массивом ¡ Создание выходного массива с заданными характеристиками
Сканирование – создание аутентичных графических образов ¢ В Техническом задании проекта формулируются требования, предъявляемые к графическим образам: ¡ Равномерное освещение без бликов и тени от переплета ¡ Равные геометрические размеры образов страниц книги (за исключением вклеек нестандартного размера) ¡ Ориентация по тексту (наклон текста не более 0, 5 градуса) ¡ Отсутствие искажения текста ¡ Единообразная глубина и насыщенность цвета страниц ¡ Нумерация страниц не должна прерываться (кроме случаев нарушения нумерации в оригинале) ¡ Четкая фокусировка изображения ¡ Переплет не должен присутствовать ¡ Недопустима потеря информации
Работы по сканированию книг производятся непосредственно на территории библиотек-владельцев фондов, что полностью исключает опасность утраты или порчи книг при транспортировке Специалисты корпорации производят экспертизу массива книг и дают рекомендации по подбору индивидуальных технологических параметров сканирования: по формату, по цвету, по качеству сканирования (обычное или высококачественное). Особое внимание уделяется подбору индивидуальных технологических параметров для книг больших форматов и веса, а также книг, не допускающих полное раскрытие
Сканирование проводится на специализированных сканерах при специальном режиме, который полностью исключает инфракрасное и ультрафиолетовое воздействие, а также порчу переплетов книг, т. к. сканирование производится бесконтактным способом при специальном освещении. Это позволяет производить качественную оцифровку книг и других сшитых документов в различных режимах цветности, без ущерба для сохранности бумажных оригиналов. В случае необходимости при сканировании книг с ветхими переплётами обязательным условием является использование качелей, исключающее изгиб переплёта. В случае, если угол раскрытия книги ограничен, её сканирование производится только с применением специальной подставки с углом раскрытия 90 градусов
Проверка отсканированных образов ¢ Проверка на отсутствие пропусков и дублей ¡ По сравнению количества образов с количеством страниц по результатам осмотра при внесении книги в базу реестра ¡ Визуальный контроль нарушения нумерации ¡ Визуальный контроль и удаление дублей ¢ Визуальная проверка качества сканов ¡ Равномерность цветовых оттенков страниц в книге ¢ Автоматизированная проверка качества сканов ¡ Контроль расфокуса ( «размытого» изображения) ¡ Отсутствие загибов страниц ¡ Определение наклона текста ¡ Контроль обрезки текста ¡ Наличие полей по краям ¡ Наличие посторонних объектов
Дополнительная обработка проверенных графических образов ¢ Точная ориентация по тексту (доворот) ¢ Удаление полей, тени от переплета, фрагментов других страниц или части обложки (обрезка) ¢ Исправление геометрических искажений текста ¢ Выравнивание образов по размеру ¢ Удаление пятен, мусора, посторонних предметов ¢ Разрезка разворотов с удалением переплета ¢ Автоматическая замена или выравнивание фона ¢ Прочие виды дополнительной обработки, предусмотренные в Техническом задании
Система контроля качества образов – четыре уровня контроля ¢ Первый уровень контроля – оператор обработки обязан проверить качество сканирования и отметить дефектные образы ¢ Второй уровень контроля – руководитель группы выборочно проверяет результаты работы подчиненных операторов (минимум по 100 образов каждого сотрудника) ¢ Третий уровень – выборочная проверка массива (минимум 10%) инспектором контроля качества Производственного центра сканирования ¢ Четвертый уровень – выборочная проверка выходных массивов графических образов независимой Инспекцией контроля качества
Дополнительные меры по обеспечению качества и сохранности электронного ресурса графических образов ¢ Возврат исходных материалов осуществляется согласно Актам приемки теми же партиями ¢ Исходные сканы (до обработки) сохраняются до полного прохождения контроля качества и сдачи электронного ресурса Заказчику ¢ АСУ сканирования в процессе выгрузки полностью проверяет соответствие формата выгружаемых файлов на соответствие ТЗ по следующим параметрам: размер образа, формат файла, разрешение, глубина цвета, степень сжатия (компрессии). ¢ Образы в текущем состоянии хранятся в двух экземплярах (принцип резервного копирования) во избежание утраты вследствие аппаратного сбоя и прочих технических проблем
Ретроспективная конверсия (или ретроконверсия) — специальная промышленная технология перевода данных из графического формата, полученного после сканирования в электронный: текстовый, или формат баз данных Графические образы Электронные библиотеки Ретроспективная конверсия. более 1 500 операторов ввода и верификации Контроль качества: проверка всего массива образов и исправление обнаруженных ошибок отдельная группа технологов и разработчиков Электронные книги Имиджинговая система Электронный каталог
Электронные книги в формате PDF Книга без закладок Книга с закладками по имеющемуся оглавлению Книга с закладками по тексту (по заголовкам глав, разделов и т. п. ) Электронные книги, сформированные из графических образов Минимальный механизм поиска по созданным закладкам Электронные книги с возможностью контекстного поиска Создается подслой с автоматически распознанным текстом без верификации, привязанным к графическому образу соответствующей страницы - на экране компьютера страницы книги отображаются в том же оригинальном виде, что и на бумажном первоисточнике, однако у пользователей есть возможность производить контекстный поиск необходимой информации и работать с текстом Электронные книги полнотекстовые Полнотекстовый электронный вариант книги – проводится полнотекстовое распознавание, проверка орфографии, верификация, макетирование текста
Оборудование для создания электронных ресурсов Широкоформатные сканеры ЭЛАРобот Более 2 А 0 А 1 -А 0 ЭЛАР Скамакс Сканеры микроформ А 2 ЭЛАР Пауэр. Скан А 3 ЭЛАР План. Скан А ЭЛАР План. Скан С Metis ЭЛАР План. Скан Репро
Оборудование для создания электронных ресурсов Сканирование сшитых, сброшюрованных, скрепленных документов Планетарные сканеры для бесконтактного сканирования
Оборудование для создания электронных ресурсов ЭЛАР План. Скан серии А ¢ Универсальный книжный сканер ¡ Книги и журналы ¡ Карты и чертежи ¡ Подшивки документов ¡ Газеты ¡ Эскизы, рисунки, альбомы ¡ Старые манускрипты ¢ Бережное отношение к оригиналу ¡ Лампы “холодного” света – защита от ИК- и УФ-излучения ¡ Книжные колыбели § § Цветной, серый, ч/б режимы Формат оригинала А 3+, А 2+ Автофокус 12 см Оптическое разрешение: формат А 3 - 400 dpi (А 3, А 3 -Ц) формат А 2 - 400 dpi (А 2 -3 Р, А 2 -Ц 3 Р)
Оборудование для создания электронных ресурсов Планетарный сканер Элар План. Скан А 1 (А 2) серии 3 - универсальный бесконтактный сканер для оцифровки сброшюрованных и крупноформатных (до А 1) документов, включая книги, фолианты, каталоги, регистрационные журналы, альбомы, архивные дела, карты, чертежи и другие документы, в т. ч. ценные и ветхие оригиналы В сканере применена инновационная система светодиодного освещения Рассчитанные на весь срок жизни сканера осветители исключают вредное воздействие света на ценные документы и обеспечивают максимально комфортные условия работы оператора
Оборудование для создания электронных ресурсов Планетарные сканеры Элар План. Скан серии А По формату: от каталожной карточки до газеты формата А 1 По толщине: от брошюры до многостраничной энциклопедии Бесконтактный способ сканирования Высокая производительность Профессиональное ПО ЭЛАР BCS 2 Полностью русский интерфейс Возможность сканирования в одиночном и пакетном режимах, пакетная обработка образов Автоматическое выравнивание кривой изгиба книги, деление на страницы Удаление тени корешка, компенсация кривизны страниц и выравнивание строк Улучшение качества образов, повышение контрастности и удаление «мусора»
Оборудование для создания электронных ресурсов ЭЛАР План. Скан серии С § § Формат оригинала А 2 Цветной, серый, ч/б режим Оптическое разрешение до 600 dpi Скорость 2, 5 сек (А 2, серый), § BW, 300 dpi (серый, ч/б режим ручная / автоматическая колыбель) § RGB, 300 dpi (цветной, серый, ч/б режим ручная / автоматическая колыбель) § RGB, 600 dpi (цветной, серый, ч/б режим ручная / автоматическая колыбель)
Инновационное устройство В дизайне Э-Скана принципиально изменен подход к эргономике сканирования, и использованы последние достижения оптоэлектроники Результат — принципиально новое устройство для оцифровки документов, сделанное не для обученных операторов сканирования, а для применения всеми сотрудниками или даже посетителями. Просто положите любой документ или объект на панель, лицом вверх, проверьте на экране уже обработанный электронный образ, и нажмите «пуск» для сохранения результата прямо в сеть на Ваш компьютер или на флэш-USB. Все!
Оборудование для создания электронных ресурсов § § § Камера 12. 2 Mpix Максимальный формат А 3++ (520 х360 мм) Максимальная толщина оригинала 50 мм Оптическое разрешение 200 dpi Скорость сканирования 0, 5 сек. на скан (полный цикл с сохранением в JPEG) – 8 сек. Режимы сканирования Цветной 24 bit, серый 8 bit, черно-белый Сенсорный дисплей 15” c русскоязычным меню Поддержка режимов сканирования: Цвет 24 бит, Градации серого, ЧБ Интерфейсы: USB 2. 0, 1000 Мбит Ethernet Сохранение графических образов на USB-носитель, в сеть или на FTP Параметры электропитания: 220 V - 50 Hz or 110 V 50/60 Hz, 70 W Габариты и вес: 580 х 900 х 590 мм, 21. 5 кг
Оборудование для создания электронных ресурсов ¢ Скоростной документный сканер ЭЛАР Скамакс серии 3000/2000 ¡ 2000 – ч/б, серый ¡ 3000 – ч/б, серый, цветной § Одностороннее/двусторонние сканирование за один проход листа § 80/110/150 листов/мин § 160/220/300 страниц в минуту
Сканирование микроформ Микрофиши Микропленки 16/35 мм
Оборудование для создания электронных ресурсов Комплекс высококачественного сканирования Элар Пауэр. Скан Непревзойденное качество, универсальность и производительность Максимальный формат 2 А 0 Использование новейших технологий Бережное сканирование любых оригиналов: - фолианты и ценные книги - картины и произведения искусства - карты, планы и чертежи - пленки и негативы различных форматов - исторические, ветхие и поврежденные документы Признание ведущих экспертов
Оборудование для создания электронных ресурсов Комплекс автоматического сканирования книг ЭЛАРобот Революция в оцифровке книг: полностью автоматический сканер Скорость сканирования до 2 500 стр. /час Цветной, серый и ч/б режим сканирования Светодиодное освещение исключает вредное воздействие на сканируемый оригинал Переворот страниц автоматический с одновременным сканированием без механического вылистывания
TREVENTUS Scan. Robot
TREVENTUS Scan. Robot
Нет проблем с тенью сгиба
Книги 16 века – в производстве ! 1. 2. Aristoteles / Castelvetro, Lodovico: Poetica, Vienna 1570 [VD 16 A 3572] Warning of Luthers german bible, Ingolstadt 1578 [VD 16 S 8592]
ЭЛАРобот – уникальные характеристики ¢ Скорость сканирования: до 2500 стр. /час, зависит от длины страницы ¢ Переворот страниц: автоматический с одновременным сканированием, без механического вылистывания ¢ Разрешение: 300 dpi (независимо от формата) ¢ Глубина цвета: 30 бит ¢ Режимы сканирования: черно–белый, полутоновый, цветной ¢ Формат страницы (ширина x высота): от 80 х110 мм (А 7+) до 30 х32 см. ¢ Толщина книги: до 12 см ¢ Толщина бумаги: от 60 г/м 2 до 240 г/м 2 ¢ Размеры: 0, 8 х 1, 92 м (без монитора) Мощное управляющее программное обеспечение ¢ ¢ ¢ ¢ ¢ Управление сканером Постоянный контроль качества Автоматический мониторинг цикла сканирования Управление потоком работ массового сканирования Возможность индексации документа во время сканирования Развитые функции автообработки сканированных страниц Поддержка штрих–кодирования Импорт дополнительных страниц в пакет — в любой момент Выгрузка индексных данных в формате XML Форматы выходных файлов: jpg, tiff, png, gif, bmp, pdf — возможность одновременного создания образов в нескольких форматах
Опыт внедрения сканеров Элар в публичных библиотеках Российская государственная библиотека Российская национальная библиотека Государственная публичная научно-техническая библиотека Центральная научная сельскохозяйственная библиотека Библиотека по естественным наукам РАН Центральная универсальная научная библиотека им. Н. А. Некрасова (Москва) Общедоступная библиотека-фонд "Русское Зарубежье « (Москва) Центральная городская детская библиотека им. А. С. Пушкина (СПб) Санкт-Петербургская государственная театральная библиотека Национальная библиотека Республики Башкортостан Национальная библиотека Республики Ингушетия Национальная библиотека Республики Саха (Якутия) Владимирская областная научная библиотека им. А. М. Горького Волгоградская областная универсальная научная библиотека Брянская научная областная библиотека им. Ф. И. Тютчева Дальневосточная государственная научная библиотека Донская государственная публичная библиотека Иркутская областная государственная универсальная научная библиотека Кировская областная научная библиотека им. А. И. Герцена Камчатская областная научная библиотека им. С. П. Крашенинникова Краснодарская краевая универсальная научная библиотека им. А. С. Пушкина Магаданская областная универсальная научная библиотека им. А. С. Пушкина Омская государственная областная научная библиотека им. А. С. Пушкина Сахалинская областная универсальная научная библиотека Ставропольская краевая универсальная научная библиотека им. М. Ю. Лермонтова Тамбовская областная универсальная научная библиотека им. А. С. Пушкина Томская государственная областная научная универсальная библиотека им. А. С. Пушкина Ульяновская государственная областная научная библиотека им. В. И. Ленина Государственная библиотека Югры Ярославская государственная областная универсальная научная библиотека им. Н. А. Некрасова Централизованная библиотечная система г. Калуга Центральная городская библиотека г. Нефтеюганска Центральная городская библиотека г. Нижневартовск Центральная библиотечная система г. Сургут Централизованная библиотечная система г. Якутска Национальная академическая библиотека Республики Казахстан Национальная библиотека Республики Узбекистан им. Алишера Навои
Реализованные проекты Российская государственная библиотека Электронная библиотека диссертаций (оцифровано более 150 тыс. диссертаций) Электронные диссертации доступны в более чем 250 виртуальных читальных залах РГБ
Реализованные проекты Архангельская областная научная библиотека имени Н. А. Добролюбова Электронная краеведческая коллекция «Русский Север» В рамках программы «Русский Север» , направленной на пропаганду и развитие народных традиций северного края России, Архангельской областной научной библиотекой им. Н. А. Добролюбова совместно с корпорацией «Электронный Архив» реализован проект по оцифровке документов об истории, быте и традициях народов, проживающих на территории края. В результате проведения работ создана электронная коллекция редких книг краеведческого фонда библиотеки «Русский Север» , состоящая из 57 книг (около 15 000 страниц). В коллекцию вошли «Атлас архангельской епархии» (1890), состоящий из 30 карт; уникальный «Иллюстрированный альбом Архангельской губернии» (1914), где в фотографиях представлена картина жизни Архангельской губернии IX — XX вв. и многие другие интересные издания. Коллекция снабжена удобными закладками, выполненными на старорусском языке Краеведческий фонд библиотеки является уникальным собранием документов (с конца VIII в. до настоящего времени) по истории Архангельской губернии. Он был создан с целью сохранения краеведческой информации и выполняет задачи по удовлетворению информационных запросов пользователей АОНБ, занимающихся изучением прошлого и настоящего Русского Cевера
Реализованные проекты Ульяновская государственная областная научная библиотека им. В. И. Ленина Электронная коллекция книг из фонда Н. М. Карамзина Свою историю библиотека ведет от Симбирской Карамзинской общественной библиотеки, открывшейся 18 апреля 1848 г. в числе первых пятидесяти губернских публичных библиотек России. Библиотека в Симбирске создавалась как памятник знаменитому земляку и первому русскому историографу Н. М. Карамзину и, по просьбе местных дворян, получила название «Карамзинской» . С конца XVII до начала XIX вв. библиотечные фонды находились в режиме постоянного пользования, по этому, издания требовали особого бережного отношения при проведении работ. Тем более, что среди них были такие образцы русской исследовательской средневековой литературы, как «Древния государственныя грамоты, наказныя памяти» , «Русская летопись по Никону» , «Судебник государя царя и великого князя Иоанна Васильевича» , «Опыт исторического словаря о всех в истинной православной грекороссийской вере» , «Древняя карта Российского государства» , «Иоанн ексарх болгарский и многие др. В рамках проекта создана электронная коллекция книг общим объемом порядка 20 000 страниц
Реализованные проекты Российский государственный университет физической культуры, спорта и туризма (РГУФКСи. Т) Создание электронной коллекции книг на основе редкого иностранного фонда научной библиотеки (более 15 000 страниц) Создание электронной коллекции книг на основе редкого отечественного фонда библиотеки (порядка 70 000 страниц) Создание отраслевой электронной библиотеки: архивный отечественный фонд, учебно-методическая литература, монографии, диссертации, авторефераты, газеты, журналы
Реализованные проекты Российская государственная библиотека по искусству Электронная библиотека газетных публикаций (работы ведутся с 2000 г. )
Проект «Преобразование в цифровую форму редких и ценных изданий по истории, теории, практике российской государственности и по вопросам русского языка как языка российской государственности с целью формирования информационного ресурса президентской библиотеки имени Б. Н. Ельцина»
О реализации проекта для Президентской библиотеки имени Б. Н. Ельцина Срок реализации: ноябрь-декабрь 2008 года Объем: оцифровано 4 353 928 стр. редких и ценных изданий (около 20 тыс. книг) Период: 19 век Основные виды работ: • постраничное сканирование бумажных документов с целью формирования электронных копий изданий в постраничном представлении в форматах TIFF, JPEG; • формирование электронных книг в формате PDF с гиперссылками по оглавлению и с возможностью контекстного поиска по автоматически распознанному тексту; • формирование библиографических описаний электронных книг в формате RUSMARC
О реализации проекта для Президентской библиотеки имени Б. Н. Ельцина Требования к сохранности книжного фонда Главное требование к процессу сканирования редких ценных книг заключается в обеспечении максимальной сохранности первоисточников и недопущении воздействий, ведущих к ухудшению их физического состояния в процессе выполнения работ. В результате проведения работ по сканированию состав и физическая сохранность книг-оригиналов не должны были быть изменены
Спасибо за внимание Ваши вопросы Андренюк Вадим Анатольевич Ведущий менеджер проектов департамента по работе с библиотеками и вузами Тел. +7 (495) 792 -31 -31 Факс +7 (495) 251 -36 -03 www. elar. ru
Скачать презентацию Современные технологии для оцифровки библиотечных фондов Андренюк Вадим
fb30653b638dfae089156076217f9a2b.ppt