Построение устойчивых ETL систем

Автор: Гарина И.О., Ходько А.О.

Журнал: Форум молодых ученых @forum-nauka

Статья в выпуске: 12 (16), 2017 года.

Бесплатный доступ

В статье рассматриваются системы манипулирования данными - так называемые Extract-Transform-Load (ETL) системы. Выявлены основные недостатки и ошибки, возникающие при проектировании такого рода систем. Представлены шаги для улучшения процесса ETL. Даны рекомендации по управлению данными, способные обеспечивать устойчивые ETL системы.

Данные, база данных, онлайн-транзакции, оптимизация, агрегация, управление, документирование, распараллеливание

Короткий адрес: https://sciup.org/140277720

IDR: 140277720

Construction of sustainable ETL systems

Data manipulation systems - the so-called Extract-Transform-Load (ETL) systems are presented in the article.. The main shortcomings and errors that arise in the design of such systems are revealed. The steps presented to improve the ETL process. Recommendations on data management, capable of providing stable ETL systems, are given.

Список литературы Построение устойчивых ETL систем

  • Малыхина, М. П. / Базы данных. Основы, проектирование, использование. - СПб.: БХВ-Петербург, 2004. - 512 с.
  • David Loshin. ETL (Extract, Transform, Load) // Business Intelligence. - 2nd. - Morgan Kaufmann, 2012. - 400 с.
  • David Haertzen. ETL Tools // The Analytical Puzzle: Profitable Data Warehousing, Business Intelligence and Analytics. - Technics Publications, 2012. - 346 с.
  • Ralph Kimball, Joe Caserta. The Data Warehouse ETL Toolkit: Practical Techniques for Extracting, Cleaning, Conforming, and Delivering Data. - John Wiley & Sons, 2004. - 528 с.