java hadoop SQL ETL

Data Engineer, Москва

Одноклассники

Одноклассники – одна из крупнейших социальных сетей. OK – самый высоконагруженный в мире сервис, написанный на Java. Большинство задач, которые возникают перед нами каждый день, не имеют готовых решений, поэтому мы используем большое количество собственных разработок. 

Задачи

  • построение новых и оптимизация существующих ETL-процессов, преимущественно на Spark + Java;
  • ad-hoc задачи по подготовке данных, их автоматизация;
  • участие в доработках платформы и фреймворков для расчетов;
  • анализ сырых данных, построение модели данных.

Требования

  • опыт и уверенное понимание принципов работы с большими объемами данных, с применением любой из технологий, например: Spark, Hive, SQL (RDBMS) и т.д.;
  • желателен опыт работы с Hadoop-стеком, Spark, Java, Scala;
  • опыт построения сложных ETL-процессов;
  • навыки разработки с применением концепций ООП;
  • знание базовых алгоритмов и структур хранения данных, понимание принципов работы распределенных систем.

Будет плюсом

  • опыт продуктовой аналитики;
  • знакомство с ML / DS, знание базовых идей и концепций;
  • понимание основ теории вероятности / статистики.

Мы предлагаем

Официальная зарплата
Гибкий график работы
Офис в центре города
ДМС
Бонусы от партнеров
Интересные задачи

Похожие вакансии

Люди — это главная ценность Одноклассников. Работая у нас, вы получаете комфортные условия и уникальный опыт разработки

Одноклассники, Москва

analytics SQL ETL

Продуктовый Аналитик / Product Analyst

Одноклассники, Москва

java

Java разработчик (проект "Новых пользователей")

Одноклассники, Санкт-Петербург

javascript java NoSQL

Java разработчик (проект "Фото")

Одноклассники, Москва

javascript java

Full-stack разработчик в "Новые пользователи"

Одноклассники, Санкт-Петербург

java hadoop data science

Data Scientist (проект "Дискуссии")

Одноклассники, Санкт-Петербург

java

Java-разработчик (проект "Поиск")

Одноклассники, Санкт-Петербург

javascript java

Fullstack-разработчик

Одноклассники, Москва

javascript java SQL

Fullstack-разработчик (проект "Монетизации")

Одноклассники, Санкт-Петербург

java backend

Java-разработчик ("ТамТам")

Одноклассники, Москва

hadoop linux spark

Big Data Platform Engineer

Одноклассники, Санкт-Петербург

java

Java-разработчик (проект "Лента")

Одноклассники, Санкт-Петербург

java android kotlin

Android-разработчик (intern)

Одноклассники, Москва

java android kotlin

Разработчик Android (проект "Новых пользователей")

Одноклассники, Санкт-Петербург

java android kotlin

Разработчик Android (проект "Дискавери")