Обработка векторных данных с помощью спецификаций в соответствии с моделью MapReduce
Автор: Федоров Роман Константинович, Авраменко Юрий Владимирович, Шумилов Александр Сергеевич
Журнал: Вестник Бурятского государственного университета. Математика, информатика @vestnik-bsu-maths
Рубрика: Информационные системы и технологии
Статья в выпуске: 2, 2017 года.
Бесплатный доступ
Одним из подходов к ускорению обработки данных является применение модели распределенных вычислений MapReduce. В данной модели исходные данные распределяются между вычислительными узлами, обрабатываются, а затем собираются в результирующий массив данных. Существующие программные средства, реализующие MapReduce, не учитывают специфику обработки пространственных данных. В целях уменьшения времени выполнения сервисов и равномерного использования доступных вычислительных ресурсов локальной облачной инфраструктуры ИДСТУ СО РАН в рамках модели MapReduce, предложены реализации операций, управляемых спецификациями, для параллельного выполнения сервисов. В данной работе рассматривается применение спецификаций для сбора результатов обработки пространственных данных в векторном формате на примере веб-сервиса идентификации объектов.
Короткий адрес: https://sciup.org/14835214
IDR: 14835214 | DOI: 10.18101/2304-5728-2017-2-12-19
Список литературы Обработка векторных данных с помощью спецификаций в соответствии с моделью MapReduce
- Авраменко Ю.В., Шумилов А.С. Спецификации методов разбиения и сборки растровых изображений в рамках программной модели MapReduce//География и природные ресурсы. 2016. № 6. С. 156-159.
- Компоненты среды wps-сервисов обработки геоданных/Р.К. Федоров, И.В. Бычков, А.С. Шумилов, Г.М. Ружников//Вестник Новосибирского Государственного Университета. Серия: информационные технологии. 2014. Т. 12, № 3. С. 16-24.
- Интерпретатор языка SOQL для обработки растровых изображений/И.В. Бычков, Р.К. Федоров, Ю.В. Авраменко, Г.М. Ружников//Новосибирск: Вычислительные технологии. 2016. Т. 21, № 1. С. 49-59.
- Hadoop: GIS: A High Performance Spatial Data Warehousing System over MapReduce/Aji A. //The 39th International Conference on Very Large Data Bases. 2013. Vol. 6, №. 11. P. 1009-1020.
- Авраменко Ю.В., Шумилов A.C. Метод обработки растровых изображений в рамках модели mapreduce//Информационные и математические технологии в науке и управлении. 2016. № 4-2. С. 110-115.
