Techno Diasoft
Москва
Полный день, От 3 до 6 лет, Полная занятость, Стандарт плюс

Ключевые навыки

SQL
MS SQL
MS SQL Server
Big Data
Hadoop

Работа в масштабном проекте, с крупнейшими массивами данных на рынке России.

Нам нужен специалист, который займётся разработкой пайплайнов обработки данных (интеграция с источниками, обработка данных, мониторинг качества и т.д.).

Задачи:

  • Участие в создании инфраструктуры управления корпоративными данными.
  • Разработка процедур потоковой и пакетной загрузки данных из различных типов внешних источников:
  1. Сырые данные по телеметрии устройств;
  2. Сырые данные по активности пользователей;
  3. Структурированные источники данных;
  • Разработка процедур обработки и анализа данных.
  • Разработка процедур доставки обработанных данных в внешние системы.
  • Разработка процедур контроля качества данных.

Профессиональные навыки:

  • Опыт работы со стеком технологий Big Data (Hadoop, Spark/Hive/Hue).
  • Опыт работы с технологиями баз данных (Postgres, MongoDB, Cassandra).
  • Опыт работы с облачными платформами управления данными (Yandex.Cloud, AWS, Mail.ru Cloud Solutions).
  • Опыт участия в проектах по созданию DWH, Data lake, Data management platforms.
  • Практический опыт разработки и оптимизации запросов к данным на базе SQL, Python.
  • Опыт построения и развития высоконагруженных систем.

Что хотим предложить:

  • Полное соблюдение ТК РФ, «белая» заработная плата;
  • Фултайм с гибким начало дня;
  • Комфортный, современный офис на Кутузе с едой и зонами отдыха, так же возможен микс вариант (удаленка + офис 1/2 раза в неделю);
  • ДМС со стоматологией;
  • Возможность быть причастным к командам, которые разрабатывают и внедряют самые передовые ИТ-продукты и сервисы в России;
  • Участие в профильных конференциях + обучение за счет компании.