Инженер-разработчик Big Data

Вакансия № 9798765 от компании АО МаксимаТелеком на Электронной Службе Занятости Населения Москвы.

☑ Основной блок:

Опыт работы: 3–6 лет.

Тип занятости: полная занятость.

График работы: полный день.

Зарплата: по результату собеседования.

Место работы (точный адрес): Россия, Москва, Менделеевская, Достоевская, Новослободская, Краснопролетарская улица, 16.

Это объявление № 9798765 добавлено в базу данных: Четверг, 23 января 2025 года.

Дата его обновления на этом интернет-ресурсе: Вторник, 18 марта 2025 года.

Прочитано соискателями - 206 раз(а);
Отправлено откликов - 0 раз(а);

МаксимаТелеком в поиске Инженера-разработчика Big data.

Что нам нужно:

развитие, оптимизация и поддержка инфраструктуры кластера Apache Hadoop (Cloudera): HDFS, Kafka, Flume, Spark, Hue, YARN, Oozie и тд.
разработка BigData-сервисов на языке Scala;
автоматизация процессов обработки данных в хранилище на сотни терабайт
автоматизация мониторинга качества данных
конфигурация и автоматизация разворачивания BigData-сервисов.

Что нам важно:

знание принципов и инструментов ETL систем
глубокое понимание экосистемы Hadoop
опыт работы с Kafka, Spark, Hive и другими сервисами Hadoop
опыт работы с базами данных PostgreSQL, Aerospike, Couchbase, HBase, Kudu, Vetrica или с аналогичными
знание языков Java, Scala, Python
опыт администрирования Linux и использования Docker
опыт автоматизации типовых задач с помощью скриптов (bash/perl/python)

Было бы отлично:

опыт работы с системами импорта данных Flume, StreamSets, Sqoop
опыт работы с системами управления потоками данных Airflow, Oozie, Luigi
опыт создания отказоустойчивых распределенных сервисов (nginx, haproxy, keepalived, corosync, pacemaker, rabbitmq и др.)
опыт работы с инструментами автоматической конфигурации (Ansible, Puppet) и CI/DD (Jenkins, Bamboo, TeamCity)

масштаб: аудитория проектов – 7 млн. в месяц;
задачи: интересные и сложные. Отличная возможность для постоянного развития;
ТК РФ: чтим. «Белая» заработная плата;
забота: хороший пакет ДМС и корпоративная связь;
офис: современный, в ЦАО – Краснопролетарская улица, около ст. м. Менделеевская, м. Достоевская, м. Новослободская.