ProfiNow Jobs  · IT-вакансии из открытых Telegram-каналов
ProfiNow Jobs › Data / ML › Senior Data Engineer (ETL-миграция)

Senior Data Engineer (ETL-миграция)

Top Selection · Senior · Удалёнка

от 250 000 до 270 000 RUB

Стэк

sqloraclepostgresqlgreenplumclickhousesparkairflowkafkagrafanaprometheuspython

Описание

Участие в миграции ETL-системы телеком-оператора с Oracle/Informatica на Apache-стек (S3, Airflow, NiFi, Kafka, Greenplum). Задачи включают перенос бизнес-логики в высокопроизводительный SQL, написание DAG-ов в Airflow, настройку пайплайнов NiFi, разработку PySpark-джобов для больших объёмов данных и интеграцию с Kafka. Требуется глубокий SQL (оконные функции, партиционирование, explain plans), опыт миграции ETL-систем (желательно с Oracle/Informatica) и знание Greenplum/ClickHouse. Мониторинг через Grafana/Prometheus, code review, разбор инцидентов качества данных. Оформление только как ИП, полная занятость, удалённо, часовой пояс МСК ±3ч.

Откликнуться

Telegram: @marinori86

Оригинальный пост: https://t.me/workayte/4385

AI-инструменты для отклика