— 5+ лет опыта на инженерных позициях
— 2+ лет опыта в качестве дата инженера
— Опыт и знания практик DevOps (Docker, мониторинг инфрасткуртуры) — Базовое понимание статистики и теории вероятности
— Опыт упраления коммандами
— Опыт работы с внутренними/внешними клиентами
— Опыт работы и знание как минимум 2х технологий из следующего списка: SQL Server, Data Lake/Delta Lake, Apache Spark, Apache Airflow
— Опыт разработки на Python3 или Java ( Если Java, то желание вникать в работу проектов на
Python/Airflow)
— возможность работать над масштабным проектом с нуля
— мы не привязываемся к офису, готовы сотрудничать удаленно
— есть медицинская страховка; компенсация спортивных клубов и школ иностранных языков; есть скидки в сети «Сильпо», наших ресторанах и аптеках
— у нас есть внутреннее обучение (ИТ и не только)
— расположение офиса на Левом берегу, Березняки БЦ Сильвер Бриз. У нас есть отлично оборудованные коворкинги, для желающих поработать в офисной обстановке
Команда Big Data инженеров будет отвечать за следующие задачи:
• Тестирование, развертывание и поддержка дата-каталога (data discovery & metadata management service)
• Автоматизация системы контроля качества данных
• Наполнение каталога метаданными и результатами анализа качества
• Управление мастер-данными
• Участие в совместной работе с владельцами данных и дата стюардами, направленная на улучшение инфраструктуры и качества данных
Как Тимлид Вы будете отвечать за управление командой дата-инженеров и код ревью
Наш проект заключается в разработке дата платформы, куда будут стекаться все аналитические данные компании. Это отличная возможность участвовать в запуске и работе большого Hadoop/Spark кластера и в одной из самых интересных BI практик в Восточной Европе.