Основа 01
Платформа данных
Участвую в развитии DWH и data lake в рамках существующей архитектуры. Реализую модели данных (Data Vault, dimensional) и поддерживаю процессы инкрементальной загрузки.
Участвую в развитии DWH и data lake в рамках существующей архитектуры. Реализую модели данных (Data Vault, dimensional) и поддерживаю процессы инкрементальной загрузки.
Разрабатываю и поддерживаю пайплайны данных с использованием Apache Airflow, Spark, dbt и CI/CD. Автоматизирую процессы загрузки и трансформации данных, повышаю стабильность пайплайнов.
Реализую ETL/ELT-процессы и проверки качества данных (валидации, базовое обнаружение аномалий). Улучшаю согласованность и надежность данных для аналитики.
Разрабатываю и оптимизирую витрины данных и BI-ready датасеты. Повышаю производительность запросов и упрощаю доступ к данным для бизнес-пользователей.