Data Engineer

Подробнее

Emma - home of multicloud
Москва
Удаленная работа, От 3 до 6 лет, Полная занятость, Стандарт плюс

Ключевые навыки

SQL
PostgreSQL
ClickHouse
ETL
DWH

Data Engineer (Office or Remote)

emma занимается разработкой платформы для создания и управления мультиоблачными виртуальными окружениями. Платформа позволяет, используя единый веб-интерфейс, развёртывать виртуальные сервера в любых локациях, в которых находятся дата-центры наших партнёров (а это как облачные титаны - AWS, Azure, Alibaba Cloud, GCP - так и локальные поставщики облачных услуг - Artmotion, Leaseweb, Baltneta, CorpSoft24 и т.д.) - то есть, по всему миру. Возможности управления созданными виртуальными вычислительными мощностями включают (но не ограничены) непосредственный контроль над состоянием ресурсов, объединение их в сети, аналитику использования ресурсов в разрезе затрат на них, предиктивный анализ состояния инфраструктуры, бюджеты и команды сотрудников, автоматическое развёртывание ПО и кросс-провайдерную миграцию инфраструктуры.
Умеем мы многое, но планов для развития платформы - ещё больше, поэтому мы активно расширяем команду продуктовой аналитики, чтобы двигаться вперёд ещё быстрее.

Немного о задачах:

Отдел аналитики разрабатывает часть платформы, отвечающую за предоставление клиенту аналитических данных о его виртуальной инфраструктуре: дашборды с историческими данными, с утилизацией виртуальных ресурсов в реальном времени, с предиктивной аналитикой состояния инфраструктуры. Кроме того, в задачи отдела входит разработка автоматической генерации клиентских рекомендаций, сбор и отображение данных о фактическом SLA облачных провайдеров и генерация изображений дашбордов для отправки клиенту в случае уведомления об отслеживаемом событии.
В рамках работы над данным функционалом от инженера по данным потребуется:

  • Собирать информацию из разнородных источников. Создавать, настраивать и поддерживать ETL-процессы;
  • Обеспечивать работу DWH, организовывать схемы для хранения как сырых данных, так и витрин.

Что мы ожидаем от инженера по данным:

  • Отличные знания SQL;
  • Опыт построения DWH;
  • Опыт использования специализированных ETL-инструментов (Informatica PC, Pentaho DI, Apache Airflow или что-то подобное);
  • Поддержка БД: разрешение проблем с блокировкой данных, скоростью доступа, хранением партиций;
  • Опыт работы с Linux и отсутствие страха перед командной строкой;
  • Английский на уровне, достаточном для чтения технической документации.

Что было бы плюсом, но не является обязательным:

  • Опыт построения DWH и ETL-процессов в контурах CI/CD;
  • Понимание принципов работы колоночных СУБД;
  • Организация DWH на ClickHouse;
  • bash/python на прикладном уровне;
  • Опыт взаимодействия с крупными облачными сервисами.

Что мы можем предложить:

  • Конкурентную зарплату, соответствующую навыкам и опыту + постоянный рост. Размер обсуждается по результатам собеседования;
  • Пятидневный график работы с возможностью определить часы работы в разумных пределах самостоятельно;
  • Опыт работы в международной компании с набором интересных задач и вызовов;
  • Профессиональный и карьерный рост;
  • Корпоративное обучение английскому языку
  • Удобный офис в Новосибирске или удалённая работа;
  • Выделенный бюджет на повышение квалификации и сертификации;
  • ТК РФ;
  • Свободу принятия решений в рамках зоны ответственности;
  • Открытую атмосферу, возможность влиять на развитие продукта;
  • Участие в конференциях и тематических мероприятиях – поощряется и оплачивается;
  • Возможны командировки, в том числе международные.