ProfiNow Jobs  · IT-вакансии из открытых Telegram-каналов
ProfiNow JobsData / MLData Engineer в команду CDP

Data Engineer в команду CDP

2Гис · Удалёнка

Стэк

kafkaclickhousesparkpythonscala

Описание

Роль в команде CDP (Customer Data Platform) компании 2ГИС предполагает повышение эффективности пайплайнов для расчёта daily-признаков на основе batch-процессинга и создание realtime-пайплайнов на базе Kafka-топиков. Необходимо проектировать и разрабатывать сервисы, обрабатывающие миллиарды пользовательских событий, решать инженерные задачи по расчёту метрик и построению витрин данных, а также обеспечивать интеграции между CDP и другими системами 2ГИС. Требуется опыт с highload-системами, проектирования архитектуры данных, уверенное знание Kafka, ClickHouse или аналогичных потоковых/аналитических систем, понимание Spark, а также владение Python или Scala. Работа полностью удалённая, в распределённой команде с аналитиками, продактами и инженерами.

Откликнуться

Оригинальный пост: https://t.me/devs_it/5529

AI-инструменты для отклика