Современные системы хранения и обработки больших данных: Hadoop и Apache Spark

Автор: Ермагамбетов Р.Т., Киселев Е.С.

Журнал: Форум молодых ученых @forum-nauka

Статья в выпуске: 8 (24), 2018 года.

Бесплатный доступ

В рамках данной статьи были проанализированы основные характеристики таких Big Data систем, как Hadoop и Apache Spark, и выяснены причины, по которым на данный момент они являются наиболее популярными.

Большие данные, системы хранения, парадигма mapreduce

Короткий адрес: https://sciup.org/140284014

IDR: 140284014

Список литературы Современные системы хранения и обработки больших данных: Hadoop и Apache Spark

Аббакумов В., Лезина Т. Бизнес-анализ информации. Статистические методы. - М.: «Экономика», 2009. - 374 с.
Гусейнов А.А., Бочкова И.А. Исследование распределенной обработки данных на примере системы Hadoop // Актуальные проблемы авиации и космонавтики. 2016. №1. С. 604-607.
Самарев Р.С. Обзор состояния области потоковой обработки данных // труды ИСП РАН. 2017. №1, том 29. С. 231-260.
Силен Д., Мейсман А., Али М. Основы Data Science и Big Data. Python и наука о данных. 4 изд. Спб.: Питер, 2017. 336 с.
Armbrust M., Xin R., Lian, C. Spark SQL: Relational data processing in spark. In ACM Special Interest Group on Management of Data, 2015, pp. 1-12.
Dean J., Ghemawat, S. Mapreduce: simplified data processing on large clusters. In OSDI'04: Proceedings of the 6th conference on Symposium on Operating Systems Design & Implementation (Berkeley, CA, USA, 2004), USENIX Association, pp. 10-10.
Laney D. 3-D Data Management: Controlling Data Volume, Velocity and Variety. Application Delivery Strategies by META Group Inc. 2001, p. 949.
Meng X., Bradley J., Yuvaz B. MLlib: Machine learning in Apache Spark. In Journal of Machine Learning Research, 17(34):1D7, 2016, pp. 1-7.
T. White. Hadoop: The Definitive Guide. Yahoo Press, 2010, p. 756.
Zaharia M., Das T., Li H. Discretized streams: Fault-tolerant streaming computation at scale. In Symposium on Operating Systems Principles, 2013, 1-16.

Еще

Статья научная