Информационные технологии

DATA ENGINEER

Санкт-Петербург 19.08.2019

Обязанности:

Что будет нужно делать:

  • Применять алгоритмы и инструменты для сбора и трансформации данных в удобный для анализа вид
  • Проводить первичный анализ данных и уметь визуально представлять данные.
  • Подготавливать обучающие выборки для Data Scientist.
  • Осуществлять интеграцию различных типов данных и источников.
  • Разрабатывать ELT скрипты.
  • Осуществлять контроль за качеством собираемых данных их агрегацией и хранением
  • Анализировать эффективность реализации процессов по сбору и хранению данных
  • Моделировать прототип, чистить данные (cleaning), строить архитектуру решения
  • Работать с различными базами данных и платформами данных
  • Объединять, очищать и приводить к пригодному для использования разнотипные данные
  • Координировать работу внешних команд в части интеграции с хранилищем данных

Требования:

Наши ожидания:

  • Hadoop ecosystem: HDFS/Spark/Nifi/Kafka (Hortonworks)
  • NoSQL DB: Cassandra, HBase
  • SQL DB: MSSQL
  • Языки: Python, Java
  • ОС: Linux, Windows
  • Docker
  • Linux
  • Java/Python

 

 

Условия:

Условия:

  • Работа в стабильной, динамично развивающейся компании
  • Перспектива профессионального роста, возможность обучения
  • ДМС, страхование жизни
  • Годовой бонус по результатам деятельности
  • Уровень заработной платы обсуждается по итогам собеседования

Будем рады, если вы проголосуете за нас в рейтинге лучших работодателей России по ссылке в разделе «Энергетика, добыча и переработка сырья».

Тип занятости:

Постоянный трудовой договор

Требуемый опыт:

От 1 года до 3 лет

  • Поделиться:



Откликнуться на вакансию