Создание современных историко-ориентированных информационных систем в США

В США существует сложная и обширная структура национальных архивов и музеев, университетов и библиотек, и других учреждений хранения историко-культурного наследия. Пропаганда идеи равных прав на информацию, а следовательно, стремление к обеспечению свободного доступа к ресурсам является приоритетным в этой стране. Это касается и исторических источников. Немаловажную роль в этом процессе играет создание электронных ресурсов в целом, а также историкоориентированных информационных систем в частности.

Изучение историко-ориентированных информационных систем в США позволит ответить на вопросы: для кого созданы ресурсы и на какую аудиторию ориентированы, какие разделы истории охватывают. Вместе с тем, важно рассмотреть методологическую и технологическую подоплеку создания этих систем в США, выявить, какие возможности с точки зрения пользовательского инструментария открывают созданные системы, что разрешено пользователям систем, вовлекаются ли пользователи в процесс совершенствования систем и ресурсов, насколько обеспечивается свобода доступа к ресурсам и мн. др.

В современной науке разрабатываются проблемы стандартов описания исторических источников в плане создания электронных ресурсов [ Юмашева , 2013], поставлены вопросы о необходимости комплексного изучения уже созданных историко-ориентированных информационных систем [ Корниенко и др., 2013, с. 95–99], а также сформулирована проблема научной значимости создающихся информационных ресурсов для историков и цифровой научной среды в целом [ Thaller , 2012, с. 6–8].

В данной статье речь пойдет о том, как организовано создание информационных ресурсов, в первую очередь историко-ориентированных информационных систем, в Соединенных Штатах Америки.

Для начала следует сказать о государственных учреждениях хранения историко-культурного наследия в США, в первую очередь о национальных архивах.

В США существует правительственная организация, возглавляющая все национальные архивы, – The National Archives and Records Administration (NARA) [The National Archives … ]. Определение основных тенденций и направлений развития государственных архивов в США является ее основной задачей. В 2006 г. в NARA был принят десятилетний план развития национальных архивов [The Strategic Plan…], а в 2013 г. план был обновлен и пролонгирован на следующее десятилетие [U.S. National Archives and Records Administration...]. Фундаментальным принципом этого плана является открытость данных, и значимость документа не вызывает никаких сомнений. Важно отметить, что планом предусмотрен еще один значимый подход – не только обеспечение общественного доступа к самим источникам, но и привлечение общественности к участию в создании электронных ресурсов. Социальным сетям и коммуникациям отводится значительная роль. Так, в процессе создания архивами информационных систем часто имеют возможность редактировать источники не только профессионалы-архивисты, но и заинтересованная публика.

В плане подчеркивается, что в национальных архивах приоритетными источниками для долговременного сохранения на основе современных технологий должны быть в первую очередь правительственные документы. Поэтому в государственных архивах США источникам такого рода уделяется особое внимание в плане дигитализации, а значит и создания на их основе историкоориентированных информационных систем.

В основе правительственной поддержки ресурсных историко-ориентированных проектов лежит грантовая система. В США существует несколько правительственных фондов, ориентированных на работу с историческим наследием. Наиболее крупные государственные фонды – The National Historical Publications and Records Commission (NHPRC) [The National Historical…], Institute of Museum and Library Services (IMLS) [Institute of Museum…], National Endowment for the Humanities (NEH) [National Endowment…], National Science Foundation (NSF) [National Science…] и др.

NHPRC (Национальная комиссия по историческим документам) является крупнейшей государственной организацией в США, целенаправленно занимающейся вопросами сохранения историко-культурного наследия. NHPRC был основан в 1934 г. Конгрессом США и возглавляется Главным архивистом США, т.е. является государственной структурой с представительным управлением. Основное направление деятельности этого фонда состоит в поддержке проектов, направленных на оцифровку, редактирование и электронную публикацию исторических документов. У фонда есть несколько приоритетных задач, и первая из них – поддержка тех проектов, которые имеют целью исследование и разработку средств для сохранения подлинных документов в электронном формате. В списке задач NHPRC представлены и более прикладные, такие как поддержка архивов в сохранении и обеспечении доступа к электронным коллекциям по истории Америки, публикации исторических источников и повышении квалификации архивных работников. Следует заметить, что непременным условием поддержки оцифровки исторических документов на основе грантов является обеспечение свободного доступа к этим источникам в режиме on-line.

Ежегодный бюджет NHPRC составляет более 10 млн долларов, что позволяет поддерживать крупные проекты и оказывать весомую помощь в создании историко-ориентированных информационных систем.

Помимо государственных организаций в США существует несколько частных фондов, деятельность которых также направлена на поддержку научных изысканий в области дигитализации и публикации исторических источников. Фонд Andrew W. Mellon Foundation [Andrew W. Mellon…] можно привести в качестве примера успешной деятельности в этом направлении. Работа этого фонда сконцентрирована в академических кругах США. В работу активно вовлекаются студенты и студенческие организации. Тем не менее поддерживаются самые разнообразные проекты, которые имеют целью выявление новых источников, их организацию, оценку, каталогизацию, оцифровку, редактирование, а также создание источнико-ориентированных ресурсов на основе информационных технологий.

Особенностью работы в области дигитализации исторических источников и создания историко-ориентированных информационных систем в США является сотрудничество учреждений хранения источников с бизнес-структурами, в первую очередь медийными. Так, важную роль в этом плане играет корпорации Google и Open Content Alliance. В ходе сотрудничества этих компаний и архивов, библиотек и музеев США происходит массовая оцифровка ресурсов, в том числе исторических источников. Если рассматривать область, вынесеную в заглавие статьи, то создание исторически ориентированных систем находится уже в сфере деятельности именно учреждений хранения, а не медиа-партнеров, которые заинтересованы в основном в получении цифровой копии источника.

Можно выделить несколько крупных групп информационных систем в зависимости от сложности систем, их наполнения и заложенного инструментария.

Под эгидой NARA в США начала функционировать крупная информационная система, которая получила название Digital Vaults [Digital Vaults…]. В этой системе объединены различные исторические источники, в том числе аудио- и видеоматериалы. Ресурсы разделены по нескольким ключевым темам по истории США, например «Гражданская война», «Американские женщины-рабочие», «Переселение в Новый Свет», «Американская находчивость: Изобретения», «Право голоса», «Революция!», «Исконное американское наследие» и др. При этом пользователю дана возможность создать на базе этих основных тем свою, более узкую или несколько отличную от суще- ствующих, в зависимости от исследовательских целей.

Важной особенностью историко-ориентированной системы Digital Vaults является предоставление пользователю возможности создать и свою коллекцию источников в соответствии с его задачами.

Возможности поисковых запросов в системе достаточно обширны – можно осуществлять запросы на поиск документов и материалов как по отдельным тематическим коллекциям, так и по всему ресурсу сразу. Существует два варианта поиска – по запросам пользователя или из обширного списка ключевых слов-тэгов. В системе разработана дополнительная фильтрация найденных источников в рамках выбранной темы, когда пользователь может выбрать тип искомого источника (фото- или видеоматериалы, документы, карты и др.).

Проект Digital Vaults объединяет более 10 млрд записей в базе. Для работы в демо-версии системы открыто более 1200 источников.

Особенностью этой системы является попытка организаторов привлечь не столько специалистов в области истории, не столько ученых и экспертов в различных областях, сколько интересующихся историей, самую широкую публику, для которой встроен в том числе особый развлекательный компонент – позволяющий создать собственное кино или постер на основе материалов проекта Digital Vaults.

Digital Vaults можно назвать мегапроектом, крупной историко-ориентированной системой, объединяющей различные документы и материалы из разных национальных архивов США. Вместе с тем эта система носит скорее информационно-развлекательный характер, не имеет библиографических списков и путеводителей по ресурсам, не содержит отдельного списка использованных в системе источников, и пользователю сложно оценить, насколько полным этот список является для изучения той или иной темы.

В США можно выделить две основные стратегии создания научных историкоориентированных информационных систем – это самостоятельное создание систем архивами, библиотеками, музеями и другими подобными институтами и создание их в процессе взаимодействия различных институтов.

По первой стратегии работают большинство учреждений в США, которые так или иначе связаны с историческими источниками. Одним из крупнейших учреждений является Публичная библиотека Нью-Йорка. В основе большинства ресурсов, созданных библиотекой, лежит тематическое разбиение источников (например, системы по истории афроамериканцев, истории танца или посвященные исследователям американского запада [The New York Public Library…].

В качестве примера можно привести созданную в Публичной библиотеке Нью-Йорка историко-ориентированную систему «В движении: афро-американский опыт миграции» [The National New York…]. Ресурс включает 16.500 страниц текстов, 8.300 иллюстраций и 60 карт. Система объединяет 13 тем о крупных миграциях, каждая тема имеет 5 обязательных разделов: 1) нарративный (включает порядка 100 иллюстраций, которые имеют библиографическую информацию, индексацию и содержат информацию для заказа источника из хранилища); 2) историографических и библиографических материалов от 20 до 40, в том числе научные статьи, монографии, эссе и т.д.; 3) картографический; 4) материалов для учителей (например, методические руководства и примеры использования материалов на уроках) и 5) библиографический (списки и ссылки на другие подобные ресурсы). В системе предусмотрен поиск по ключевым словам во всех видах материалов.

Часть созданных Публичной библиотекой Нью-Йорка систем более узко ориентированы в тематическом плане и по отношению к используемым ресурсам (как, например, «Американская история в видео» или «Меняющийся Нью-Йорк: Фотографии Беренис Эббот, 1935-1938» [Changing New York…]).

Созданные информационные ресурсы чаще всего обладают минимальным исследователь- ским инструментарием – позволяют вести расширенный поиск в оцифрованных коллекциях, а каждый из источников имеет метаописание и идентификационный номер, отсылающий к оригиналу источника в хранилище библиотеки.

Созданные библиотекой историко-ориентированные системы включают в себя разноплановые источники, в том числе письма, фотографии, аудио- и видеодокументы (например, в библиотеке создана информационная система, посвященная американским песням конца XIX – начала XX в. – American Popular Song Sheet Covers, 1890–1922 [American Popular…]). Все эти системы имеют осуществлять полнотекстовый поиск по материалам. А изображения, входящие в состав систем, имеют описание и набор ключевых слов для удобства поиска. Особенность этих информационных систем заключается в большей образовательной направленности ресурсов, а функционал и замысел систем в основном имеют целью способствовать знакомству с известными фактами и событиями, а не получению нового научного знания.

Необходимо отметить определенное ограничение в характере упомянутых информационных систем: чаще всего полный доступ к системам возможен в стенах самой библиотеки или, в довольно редких случаях с сайтов-партнеров (чаще всего это университетские сайты, и только студенты и преподаватели имеют доступ к ресурсам).

Подобно Публичной библиотеке Нью-Йорка работают многие крупные центры в США, в том числе университеты и другие публичные библиотеки.

Отдельно следует сказать о Библиотеке Конгресса США [Library Congress…], крупнейшей библиотеке Соединенных Штатов. Проектам по дигитализации исторических источников из хранилищ Библиотеки уделяется особое внимание. В этом учреждении создан не один десяток информационных систем различного профиля, среди которых можно выбрать именно историкоориентированные системы для исследователей. На сайте Библиотеки выложен список созданных цифровых ресурсов с аннотациями [Список проектов…].

Созданные в библиотеке Конгресса США историко-ориентированные информационные системы различны по наполнению (по типам и видам источников, по историческим периодам и т.д.), а также по функционалу. Большинство систем разнятся возможностями извлечения, фильтрации и структурирования искомой информации.

Проект Chronicling America, созданный Библиотекой Конгресса США вместе с Национальным фондом гуманитарных наук (National Endowment for the Humanities – NEH), является интересным примером крупной историко-ориентированной информационной системы [National Endowment…]. Chronicling America включает электронные версии американских газет, выходивших в 1836–1922 гг., а также данные издававшихся в США газет с 1690 г. по настоящее время. В системе предусмотрен поиск по контексту, а границы поиска определяет пользователь (есть возможность выбора того или иного печатного издания, штата, периода издания – с минимальным шагом в 1 день, языка, на котором издавалась газета). Важной поисковой особенностью системы является наличие вариативности поиска по словам – поиск искомого слова с другим словом, со всеми словами, с целой фразой или отдельными словами в определенном пределе (на расстоянии 5–100 слов друг от друга). Результаты поиска можно сортировать по релевантности, штату, названию газеты и дате публикации. Кроме того, заложена возможность поиска и демонстрации результатов поиска на определенных страницах газеты (например, только на лицевой стороне). Проект Chronicling America является продолжающимся, и система постоянно обновляется и совершенствуется [Chronicling America…]. Кроме внесения данных о газетах, добавления оцифрованных версий газет, осуществляется важная работа по XML кодированию текстов, что создает дополнительные возможности поиска и анализа информации.

Следует подчеркнуть, что большинство созданных в Библиотеке Конгресса США информационных систем рассчитано на исследовательскую аудиторию, в том числе на преподавателей и студентов. В отдельных системах приведены примерные инструкции, по использованию системы в образовательных целях.

Под эгидой Библиотеки Конгресса США создается и программное обеспечение, позволяющее создавать частные проекты по дигитализации ресурсов, а также организовывать информационные системы. Речь идет о свободно распространяемой бесплатной платформе ViewShare, которая открывает широкие возможности для организации различных ресурсов в виде цифровых коллекций [ViewShare…]. Платформа ViewShare позволяет не только визуализировать ресурсы, но и представ- лять содержание в виде графиков и диаграмм, а также обеспечивать довольно сложную навигацию по историческим данным. Следует обратить внимание на то, что в возможностях платформы заложен и исследовательский инструментарий. На частном примере проекта Cason Monk-Metcalf Funeral Directors [Cason Monk-Metcalf…] продемонстрированы некоторые возможности платформы ViewShare, позволяющие визуализировать данные о возрасте, национальном и религиозном составе людей, похороненных компанией Кейсонов в США в разные временные отрезки. Информационная система, посвященная похоронным записям, организована как достаточно сложная система с визуализацией источника (в виде имиджа и транскрибированного содержания), возможностями поиска, фильтрации результатов, а также представления результатов запросов в необходимом виде (списки, графики, таблицы).

Анализ историко-ориентированных информационных систем, созданных в библиотеках США, показывает, что создание этих ресурсов лежит в русле деятельности библиотек как институтов хранения источников и обеспечения к ним доступа. Многочисленные информационные системы, созданные в американских библиотеках, содержат в основном библиографическую информацию и расширенное описание, в том числе описание содержания, но само содержание в виде электронных текстов остается за пределами круга задач, поставленных создателями этих ресурсов.

В США, в частности, существует «система по системам», созданная специально для преподавателей высшей школы и студентов колледжей, – History Matters. The U.S. Survey Course on the Web, объединяющая порядка 1 000 веб-ресурсов по американской истории [History Matters … ]. Этот проект предусматривает возможность расширенного поиска по документам и материалам, размещенным на сайтах-партнерах. Поиск можно осуществлять по темам и историческим периодам, по типам и видам первичных исторических источников, а также по историографическим источникам и литературе, в том числе научным статьям и форумам.

Важным достоинством этих систем является наличие коллекций в открытом бесплатном доступе, что делает их доступными пользователям по всему миру.

Вторая стратегия создания историко-ориентированных информационных систем предполагает сотрудничество научных центров и специалистов учреждений хранения, сбора и обработки артефактов. Как вариант стратегии можно рассматривать создание крупных комплексных информационных систем в процессе сотрудничества государственных структур, научных центров и частных организаций. Комплексный характер подобных проектов проявляется в разнообразии источниковой базы как по типу источника, так и по месту хранения первичных источников, а также в методико-технологической составляющей. При таком подходе создаются системы, которые предусматривают многообразные пользовательские и исследовательские возможности.

Крупным проектом такого рода является ресурс Founders Online [Founders Online … ], посвященный отцам-основателям. Этот проект создан в результате сотрудничества пятнадцати государственных и частных фондов, а также независимых экспертов и специалистов.

Система организована так, что пользователи имеют право регистрироваться на сайте и сохранять выборки документов, сортировать отобранные документы по темам, которые задает сам пользователь, ограничивать параметры поиска (к примеру, определенным временным периодом). Причем пользователям открыта возможность сохранять не только найденные документы, но и сами варианты предшествующих поисковых запросов. В системе предусмотрен многовариантный поиск по источникам, существует и полный список введенных в систему документов и материалов. Множество источников, объединенных связями, – важная особенность этой информационной системы. Например, письма респондентов связаны не только между собой как ответные письма, но и с другими источниками, которые могут заинтересовать пользователя. Научное значение этой историкоориентированной системы несомненно – каждый источник в системе имеет метаописание с обязательным указанием места хранения источника со всеми необходимыми реквизитами, каждый ресурс содержит аннотацию, содержащую с краткое описание происхождения источника и другую информацию о том или ином документе, а также транскрипцию текста в источнике. Важно подчеркнуть, что исторические источники имеют разметку XML, что создает дополнительные возможности для работы с документами. Вместе с тем не все источники имеют эту разметку. Проект является постоянно обновляемым и поддерживаемым, поэтому к документам, которые еще не размечены с помощью XML, или не полностью описаны, или не имеют полной аннотации, открыт отдельный, так называемый ранний доступ (early access). На декабрь 2013 г. таких документов в си- стеме было более 55 тыс. На 2014 г. запланирован перевод всех этих документов в «итоговые версии». В данный момент в системе содержится более 120 тыс. источников «полного доступа». Для работы с документами из «раннего доступа» создано отдельное программное приложение Document Compass.

Информационная система Founders Online построена на базе данных MarkLogic и приложениях для индексирования, поиска и доставки хранящегося контента на основе XML. Система обеспечивает фассетный, многогранный поиск для более легкого и релевантного поиска по документам и материалам системы.

В целом система очень детально продумана и может служить ориентиром при построении крупных историко-ориентированных систем в других тематических областях.

Отдельно следует сказать о проектах, реализуемых в университетах и при участии университетов. Университеты в США имеют серьезную научную основу для всех этапов работы над информационными системами, а именно обладают техническими, технологическими и методологическими возможностями. Поэтому в сотрудничестве архивов, музеев и университетов рождаются сложные многофункциональные информационные историко-ориентированные системы.

В этом случае создаются сложные, комплексные системы, включающие в свой состав не только десятки и сотни тысяч документов и иных материалов, но и более разработанный инструментарий для анализа ресурсов, извлечения и визуализации информации.

В рамках данной статьи невозможно рассмотреть и малую часть историко-ориентированных информационных систем, созданных университетами или при участии университетов. Остановимся лишь на некоторых из них.

Созданные тематически информационные системы достаточно разнообразны. Они охватывают в основном различные периоды американской истории. Проект The Valley of the Shadow [The Valley…], реализованный в университете Вирджинии при участии университетской библиотеки и Центра цифровой истории Вирджинии, содержит источники, посвященные жителям двух округов штатов Вирджиния и Пенсильвания в период Гражданской войны в США. В информационную систему объединены тысячи писем и дневников, переписи и правительственные отчеты, газеты и речи различных деятелей, другие источники. Проект позволяет увидеть и проанализировать различные аспекты истории повседневности того периода во Франклине и Аугусте. В информационную систему заложен сложный пользовательский инструментарий, предполагающий контекстные запросы по очень подробному списку маркеров (различные половозрастные критерии, территориальные, временные рамки и многие другие). Все источники системы объединены в три крупных временных периода, тематически разбиты и представлены в виде понятной схемы. Каждый пункт схемы гиперссылкой соединен с нужной группой источников, чтобы можно было выбирать искомые тематические блоки для дальнейшего более подробного поиска. Источники представлены в двух форматах – XML и PDF, что является несомненным достоинством системы. Также следует отметить, что каждая группа источников имеет подробное библиографическое и историографическое описание.

Информационные системы, созданные в университетском сообществе, выделяются и более сложным способом визуализации результатов поиска. Можно привести в качестве примера подобных систем проект Virginia Secession Convention [Virginia…]. Ресурс посвящен дебатам делегатов-выборщиков 1861 г. от штата Вирджиния относительно присоединения или неприсоединения к Соединенным Штатам. Информационная система включает полные тексты речей делегатов, подробную информацию о них, а также данные о социальном составе всех округов штата. Система предусматривает поиск в полнотекстовых коллекциях по ключевым словам, причем поиск можно осуществлять по речам отдельных делегатов (можно выбрать одного или нескольких делегатов для одновременного поиска) либо по отдельным округам (или по совокупности округов). Результаты поиска отображаются в виде списка и интерактивной карты-диаграммы. В способах визуализации результатов заложен и аналитический инструментарий, что показывает особую ценность данной информационной системы.

Созданные историко-ориентированные информационные системы в США являются во-многом логическим продолжением целенаправленной политики США в области сохранения историко-культурного наследия. В первую очередь, это приоритетная дигитализация правительственных документов и материалов государственных структур и лиц разных эпох, а также различных источников по истории государства и права США. С точки зрения технологической и методологической составляющих информационные системы чаще всего строятся на основе так называемых primary sources, т.е. первично оцифрованных источников. Это означает, что большинство историкоориентированных систем в США содержит электронные копии документов и их описание, а более продвинутые, сложные, комплексные цифровые ресурсы (например, подвергнутые глубокой разметке тексты) по вполне очевидным причинам принадлежат лишь к узкому кругу информационных систем. Тем не менее деятельность различных организаций в США по сохранению историкокультурного наследия, в частности, по созданию историко-ориентированных информационных систем, имеет достаточно структурный и планомерный характер, а перспективный взгляд и правительственная поддержка вызывают уважение.