bigdata DWH

Junior Data Engineer, Москва

Одноклассники

Одноклассники – одна из крупнейших социальных сетей. OK – самый высоконагруженный в мире сервис, написанный на Java. Большинство задач, которые возникают перед нами каждый день, не имеют готовых решений, поэтому мы используем большое количество собственных разработок. 

В команду, занимающуюся анализом и хранением данных, ищем человека на роль Junior Data Engineer. Основные задачи команды – это построение и оптимизация ETL-процессов на базе Hadoop-стека.

Мы ожидаем хорошее представление о принципах работы с данными, принципах работы распределенных систем, понимание алгоритмов их обработки и умение работать без четких ТЗ, плотно взаимодействуя с заказчиком. Конкретный опыт с теми или иными технологиями не сильно критичен.

Задачи

  • построение новых и оптимизация существующих ETL- процессов, преимущественно на Spark + Java;
  • ad-hoc задачи по подготовке данных, их автоматизация;
  • участие в доработках платформы и фреймворков для расчетов;
  • анализ сырых данных, построение модели данных.

Требования

  • навык и/или понимание принципов эффективной работы с большими объемами данных (SQL, Spark SQL);
  • понимание принципов работы распределенных систем;
  • знание базовых алгоритмов и структур хранения данных
  • понимание концепций ООП;

Будет плюсом

  • Прохождение образовательных курсов по big data;
  • Опыт работы/участие в учебных проектах с Hadoop-стеком;
  • Опыт программирования на Java.


Мы предлагаем

Официальная зарплата
Гибкий график работы
Офис в центре города
ДМС
Бонусы от партнеров
Интересные задачи

Похожие вакансии

Люди — это главная ценность Одноклассников. Работая у нас, вы получаете комфортные условия и уникальный опыт разработки