Вакансия давно не обновлялась источником и могла устареть. Контакт работает.
R
RedLab
сегодня

Senior Data Engineer в RedLab

350 000–380 000 ₽
Сгенерировать отклик под эту вакансию с ИИ
Аврора подстроит резюме и напишет сопроводительное за 30 секунд

Чем предстоит заниматься

  • Проектировать, разрабатывать и сопровождать масштабируемые решения по интеграции, обработке и хранению данных в корпоративной платформе данных.
  • Разрабатывать и оптимизировать batch- и streaming-пайплайны для загрузки, трансформации и публикации данных.
  • Создавать ETL/ELT-процессы с использованием современных инструментов обработки данных.
  • Проектировать модели данных для аналитических и операционных сценариев.
  • Оптимизировать производительность процессов обработки данных и SQL-запросов.
  • Обеспечивать качество данных: реализовывать механизмы валидации, мониторинга и контроля полноты данных.
  • Участвовать в проектировании архитектуры платформы данных и выборе технологических решений.
  • Внедрять и развивать практики DataOps и CI/CD для процессов обработки данных.
  • Готовить техническую документацию и архитектурные артефакты.
  • Проводить код-ревью, техническое менторство и участвовать в развитии команды.

Требования

  • Опыт работы Data Engineer от 5 лет
  • Знание методологии Data Vault 2.0
  • Уверенные знания Python/Scala/Java для разработки ETL/ELT-процессов и сервисов обработки данных
  • Отличное знание SQL, опыт оптимизации сложных запросов и работы с большими объемами данных
  • Опыт проектирования и разработки промышленного Data Warehouse, Data Lake или Lakehouse решений
  • Практический опыт работы с Apache Spark
  • Опыт работы с Apache Airflow, Apache Kafka
  • Опыт работы с системами потоковой обработки данных
  • Опыт работы с распределенными файловыми системами и форматами хранения данных: HDFS, Parquet, Avro
  • Опыт работы с экосистемой Hadoop/Apache Iceberg или современными платформами хранения и обработки данных
  • Опыт работы с реляционными СУБД (PostgreSQL, Oracle, Clickhouse, Greenplum)
  • Уверенное владение Git и понимание процессов CI/CD
  • Опыт работы с системами управления задачами и документацией (Jira, Confluence или аналоги)
  • Понимание принципов построения отказоустойчивых и масштабируемых решений
  • Опыт использования dbt для построения трансформационных слоев данных
  • Практика внедрения Data Quality решений (Great Expectations, Soda и др.)
  • Опыт работы с Data Catalog и Data Governance инструментами

Условия

  • Формат работы: удалённо.
  • Занятость: полная или проектная.
  • Оформление по ГПХ.
  • Заработная плата: 350 000 – 380 000 RUB (гросс).
  • Локация: РФ, РБ.
  • Гражданство: РФ, РБ.

Стек

PythonScalaJavaSQLApache SparkApache AirflowApache KafkaHDFSParquetAvroHadoopApache IcebergPostgreSQLOracleClickhouseGreenplumGitCI/CDJiraConfluencedbtGreat ExpectationsSoda

Контакт работодателя

Прямой контакт рекрутёра в Telegram, без посредников
@recruiter_hidden
Бесплатно — за подписку на наш Telegram-канал
@recruiter
Telegram · прямой контакт
Написать
Аврора откликнется за вас. Пока вы пишете одному рекрутёру, автопилот отправляет отклики на все подходящие.
Попробовать →
Контакты открываются по подписке на канал. Подпишитесь — и контакт откроется сразу, ничего заполнять не нужно.
Подписаться снова
Дневной лимит контактов исчерпан. Счётчик обнулится в 00:00 по Москве — вакансия никуда не денется, она уже в вашей истории.
Безлимит будет в подписке Авроры — скоро.
Узнать первым →
Вакансия в архиве — отклик недоступен. Посмотрите похожие активные вакансии ниже.
Показать контакт