студент
Россия
студент
Россия
сотрудник
Россия
ВАК 2.3.6 Методы и системы защиты информации, информационная безопасность
УДК 004.658 Администрирование базой данных
Рассматривается проблематика использования процессов ETL и ELT в системах обработки данных. Эти процессы играют ключевую роль в интеграции и анализе данных, однако их применение сопряжено с рядом проблем, требующих научно-теоретического осмысления. Цель: изучение проблем, возникающих при построении систем обработки данных, включая высокие временные затраты на настройку и оптимизацию, вопросы качества данных, масштабируемости и безопасности. Результаты: предложены рекомендации по выбору между ETL и ELT, а также решения для оптимизации процессов, обеспечения качества и безопасности данных. Практическая значимость: заключается в разработке новых подходов повышения эффективности работы с корпоративными хранилищами данных. Обсуждение: подчеркивается необходимость оптимизации процессов ETL и ELT, повышения качества и безопасности данных, обоснованного выбора архитектуры хранилищ данных для эффективной работы с информацией.
ETL, ELT, интеграция данных, проблемы качества данных, масштабируемость, безопасность данных, выбор архитектуры, оптимизация процессов, хранилища данных
1. Остудина К. А., Киреев В. С. Архитектура хранения и обработки текстовых открытых данных // Интеллектуальные технологии в науке и образовании: материалы Международной научно-практической конференции (Новочеркасск, Россия, 24–25 ноября 2023 г.). Новочеркасск: Лик, 2023. С. 102–108. EDN: https://elibrary.ru/BNMYYT
2. Соколов В. А., Пономарева К. А. ETL-процессы как способ организации импорта данных для обеспечения функций управления / В. А. Соколов, К. А. Пономарева; науч. рук. Р. И. Кузьмич // Проспект Свободный — 2023: материалы XIX Международной научной конференции студентов, аспирантов и молодых ученых (Красноярск, Россия, 24–29 апреля 2023 г.). Красноярск: Сибирский федеральный ун-т, 2023. С. 3350–3353. EDN: https://elibrary.ru/KZSQXL
3. Упаева П. В. Оптимизация ETL-процессов: обзор отечественного рынка // Вестник науки. 2024. № 6 (75), Т. 4. С. 1218–1224. EDN: https://elibrary.ru/ALSVLJ
4. Пьянзин А. М., Лайша А. К., Аносов М. С. Обзор современных решений для хранения и структурирования данных в аддитивных технологиях // Технологии аддитивного производства. 2025. Т. 3, № 1. С. 43–48. EDN: https://elibrary.ru/CICUVT
5. Блохин В. В., Лосев В. С. Автоматизация процесса актуализации данных в витринах: как упростить работу аналитиков // Финансовая экономика. 2024. № 10. С. 100–103. EDN: https://elibrary.ru/EJXSHW
6. Тавторкин Н. О., Куляшова Н. М. ETL-процессы в работе с данными // Будущее науки — 2024: сборник научных статей 11-й Международной молодежной научной конференции (Курск, Россия,18–19 апреля 2024 г.): в 5 т. Т. 4. Курск: Университетская книга, 2024. С. 175–178. EDN: https://elibrary.ru/TASEXJ
7. Макаров В. В., Волчик О. В. Управление данными в системах менеджмента качества // Экономика и качество систем связи. 2024. № 4 (34). С. 4–13. EDN: https://elibrary.ru/ODTKQU
8. Лабинский А. Ю. Программные средства обработки больших объемов данных // Природные и техногенные риски (физико-математические и прикладные аспекты). 2024. № 4. С. 45–52. DOI:https://doi.org/10.61260/2307-7476-2024-2023-4-45-52. EDN: https://elibrary.ru/JSUJTW
9. Мандрика О. С., Ермаков С. Г. Модели построения корпоративного хранилища данных // Информатизация и связь. 2024. № 2. С. 22–26. DOI:https://doi.org/10.34219/2078-8320-2024-15-2-22-26. EDN: https://elibrary.ru/KFXRLZ
10. Яковенко Е. С. Основные понятия и примеры программных инструментов в сфере обработки больших данных // Научные исследования в современном мире: опыт, проблемы и перспективы развития: сборник научных статей по материалам XIV Международной научно-практической конференции (Уфа, Россия, 19 апреля 2024 г.). Уфа: НИЦ Вестник науки, 2024. С. 563–567. EDN: https://elibrary.ru/EUIOWC
