Data Engineer (Middle)
Что предстоит делать
Компания Кодекс-ИТ ищет Data Engineer уровня Middle для работы над проектом единой системы оценки эффективности. В рамках проекта вы будете разрабатывать решения вокруг DWH, создавать и настраивать ETL-пайплайны, обеспечивать BI-аналитику и хранение данных в Apache Iceberg. Необходимо проектировать архитектуру сбора данных и витрин, тестировать данные на всех уровнях качества, настраивать метрики и алерты в Prometheus и интегрировать их с внутренними системами оповещений. Работа удаленная, с гибким графиком в пределах ±2 часов от МСК. Предлагается интересный проект с архитектурными задачами и профессиональный рост.
Требования:
• Опыт проектирования и построения пайплайнов: Python / Apache Airflow
• Интеграция источников с GraphQL, RESTful
• Хранение данных в Apache Iceberg / проектирование архитектуры хранения данных
• Проектирование архитектуры сбора данных и витрин
• Тестирование данных на всех уровнях требований к качеству данных
• Настройка метрик и алертов Prometheus / интеграция с внутренними системами оповещений
• Знание предметной области
Условия:
• Удаленный формат работы
• Интересный проект с архитектурными задачами
• Профессиональный рост
Обязанности:
• Разработка решений вокруг DWH
• Создание ETL / настройка сбора данных, BI-аналитика
• Проработка архитектуры данных и системы для их сбора
• Внедрение нового функционала, сокращение техдолга
Что мы ждём от кандидата
- Опыт проектирования и построения пайплайнов: Python / Apache Airflow
- Интеграция источников с GraphQL, RESTful
- Хранение данных в Apache Iceberg / проектирование архитектуры хранения данных
- Проектирование архитектуры сбора данных и витрин
- Тестирование данных на всех уровнях требований к качеству данных
- Настройка метрик и алертов Prometheus / интеграция с внутренними системами оповещений
- Знание предметной области
Что предлагаем
- Удаленный формат работы
- Интересный проект с архитектурными задачами
- Профессиональный рост
О Deffic
Откликнитесь на сайте работодателя.