Data Engineer в Delivery Club

Ключевые навыки

Отдел аналитики Delivery club ищет специалиста в области DWH/BI который поможет в развитие нашего аналитического хранилища, а также культуры работы с данными в целом. В ближайшее время нас ждут масштабные изменения в инфраструктуре хранилища с переработкой продуктового стэка, в который войдут следующие технологии и решения: Hadoop, Hudi, Hive, Spark, Airflow, Vertica, Tableau, Python, Jenkins, BitBucket

Задачи:

• автоматизация различных задач, связанных со сбором и обработкой данных;
• поддержка развития аналитического хранилища данных: изменение инфраструктуры, ETL, BI-инструментов;
• консультирование и помощь разработчикам и инженерам сопровождения в части внедряемых процессов и практик;
• участие в проектирование, настройки и развертывания тестовой и боевой инфраструктуры;
• контроль базовых и специфичных требований информационной безопасности;
• анализ и оптимизация процессов доставки и развертывания (CI/CD);
• документирование практик и стандартов.

Требования:

• знание SQL, Python;
• опыт работы с Hadoop стэком, Airflow;

• опыт работы с Github, командная разработка;
• опыт работы с высоконагруженными распределенными хранилищами, аналитическими системами, масштабирования в условиях постоянного роста кол-ва источников и объема данных;
• коммуникабельность, ответственность.

Будет плюсом:

• уверенная работа в Linux;
• опыт работы с Hudi, Hive, Spark, Vertica, Tableau, Jenkins;
• навыки DevOps (RPM, Docker).

Работа в Mail.ru Group — это:

• разнообразие проектов: соцсети, почтовые сервисы, киберспорт, игры, электронная коммерция, мессенджеры, образование, B2B — которые помогают миллионам пользователей работать, решать бытовые задачи, учиться и развлекаться;
• сложные и интересные задачи: высоконагруженные сервисы, которые задают уровень для конкурентов качеством и технологиями; быстрый рост в трендовых направлениях; амбициозные цели перед каждым проектом;
• экспертиза: сотрудники Mail.ru Group обладают передовым опытом, преподают в образовательных проектах, выступают на российских и международных конференциях;
• команда: вместе работаем, занимаемся спортом, участвуем в соревнованиях и отдыхаем;
• профессиональное развитие: организуем митапы, конференции, встречи разработчиков и тестировщиков, семинары и тренинги, куда открыт доступ каждому сотруднику;
• здоровье и спорт: программа ДМС доступна с первого месяца работы; поддерживаем 8 корпоративных видов спорта (футбол, баскетбол, волейбол, бег, плавание, хоккей, триатлон, настольный теннис);
• оборудование: мощное железо, дополнительные мониторы, специализированные гаджеты — все для решения масштабных задач и экспериментов;
• офис в 5 минутах от метро, крытый паркинг для всех сотрудников, велопарковка, а летом — прокат велосипедов, лонгбордов и самокатов; для поддержания иммунитета круглый год во фреш-баре овощи и фрукты; собственный тренажерный и спортивный зал в офисе;
• возможность работать удаленно или по гибридному графику: часть рабочего времени — в офисе, часть — дома.

Мы будем рады твоему отклику и, при обоюдном интересе, предложим условия и проекты, от которых не захочется отказываться.