Senior Data инженер
Что предстоит делать
Компания RedLab ищет Senior Data Engineer для работы над корпоративной платформой данных. Вакансия открыта для граждан РФ и РБ, формат работы – удалёнка, занятость – полная/проектная. Заработная плата 350 000–380 000 RUB (гросс), оформление по ГПХ. Кандидат будет проектировать, разрабатывать и сопровождать масштабируемые решения по интеграции, обработке и хранению данных, включая batch‑ и streaming‑пайплайны, модели данных, оптимизацию SQL‑запросов и обеспечение качества данных. В обязанности входит разработка ETL/ELT‑процессов, участие в архитектурных решениях, подготовка технической документации, код‑ревью и менторство команды. Требуется глубокое знание Data Vault 2.0, Apache Spark, Airflow, Kafka, HDFS, Parquet, Avro, Hadoop, Iceberg, PostgreSQL, Oracle, ClickHouse, Greenplum, а также опыт работы с Python/Scala/Java, Git, CI/CD, Jira, Confluence, dbt, Great Expectations, Soda и инструментами Data Catalog и Data Governance.
Что мы ждём от кандидата
- Опыт работы Data Engineer от 5 лет.
- Знание методологии Data Vault 2.0
- Уверенные знания Python/Scala/Java для разработки ETL/ELT-процессов и сервисов обработки данных.
- Отличное знание SQL, опыт оптимизации сложных запросов и работы с большими объемами данных.
- Опыт проектирования и разработки промышленного Data Warehouse, Data Lake или Lakehouse решений.
- Практический опыт работы с Apache Spark.
- Опыт работы с Apache Airflow, Apache Kafka
- Опыт работы с системами потоковой обработки данных
- Опыт работы с распределенными файловыми системами и форматами хранения данных: HDFS, Parquet, Avro;
- Опыт работы с экосистемой Hadoop/Apache Iceberg или современными платформами хранения и обработки данных.
- Опыт работы с реляционными СУБД (PostgreSQL, Oracle, Clickhouse, Greenplum).
- Уверенное владение Git и понимание процессов CI/CD.
- Опыт работы с системами управления задачами и документацией (Jira, Confluence или аналоги).
- Понимание принципов построения отказоустойчивых и масштабируемых решений.
- Опыт использования dbt для построения трансформационных слоев данных.
- Практика внедрения Data Quality решений (Great Expectations, Soda и др.).
- Опыт работы с Data Catalog и Data Governance инструментами.
Что предлагаем
- Удалёнка
- Полная/проектная занятость
- ЗП 350 000–380 000 RUB (гросс)
- Оформление по ГПХ
О Deffic
Откликнитесь на сайте работодателя.