Big Data Engineer / Analyst (проект Мой Мир)

Социальные сети, Мой Мир

Мой Мир – российская социальная сеть с ежемесячной аудиторией в 16,4 млн человек (TNS, все население России в возрасте 12-64 лет, декабрь 2015 г.). Мой Мир активно развивает собственное API. С его помощью независимые разработчики могут, в частности, создавать приложения для пользователей соцсети. Мой Мир является одним из лидеров в этом направлении — в рамках проекта уже представлено большое количество игр различных тематик от российских и зарубежных разработчиков.

В наших проектах мы решаем очень сложные задачи. Наши системы – это тысячи серверов и миллионы запросов в минуту. Наши задачи связаны с огромным потоком разнородных данных, которые мы обрабатываем, храним и мгновенно отдаем пользователям; это сотни различных сущностей и тысячи взаимосвязей между ними, которые мы учитываем в нашей бизнес-логике.

Мой Мир – один из самых востребованных проектов Mail.Ru Group, и у нас всегда есть рабочие места для тех, кто полон энтузиазма и свежих идей. Нам нужны люди, которых мотивируют сложные и интересные задачи и которые хотят претворять в жизнь самые смелые идеи и находки. В Mail.Ru Group ни одна удачная мысль не остается без внимания!

  • Задачи
    • разработка платформы по приему и обработке больших данных;
    • подготовка отчетов и дэшбордов для аналитиков и менеджеров;
    • совместная аналитика данных вместе с заказчиком ;
    • участие в миграции с MSSQL в Hadoop.
    • технологии, которые мы используем:
    • hadoop, hive, spark, kafka, druid, hbase, zookeeper, cassandra, postgresql/mssql, zeppelin.
  • Требования
    • углубленные знания SQL;
    • опыт программирования на Java;
    • знание Hadoop, Hive.
  • Будет плюсом
    • опыт работы с большими объемами данных;
    • опыт работы с linux, bash;
    • знание spark, scala.

город

Москва

Пройти тестирование

Присылайте ваше резюме на hr@corp.mail.ru