Hadoop-инженер

Вакансия № 1400538 от компании HeadHunter::Технический департамент на Электронной Службе Занятости Населения Москвы.

✷ Смотрите другие предложения работы от компании HeadHunter::Технический департамент.

☑ Основной блок:

Опыт работы: 3–6 лет.

Тип занятости: полная занятость.

График работы: полный день.

Зарплата: от 150000 до 200000 руб..

Место работы (точный адрес): Россия, Москва, Годовикова, 9, стр. 10 (территория завода «Калибр»), м. Алексеевская.

☑ Актуальность объявления:

Это объявление № 1400538 добавлено в базу данных: Вторник, 11 февраля 2025 года.

Дата его обновления на этом интернет-ресурсе: Воскресенье, 16 марта 2025 года.

☑ Статистика предложения работы № 1400538:

Прочитано соискателями - 208 раз(а);
Отправлено откликов - 0 раз(а);

☑ Репутация компании "HeadHunter::Технический департамент":

Читайте свежие отзывы сотрудников об этом работодателе здесь!

Оставить своё мнение об этой компании можно тут без регистрации и бесплатно.

☑ Подробности о вакантном месте:

Мы создаём высоконагруженный сервисный сайт, который занимает 3 место в мире по рейтингу SimilarWeb среди сайтов по поиску работы. Ежедневно к нам приходят около полутора миллионов пользователей, смотрят более 100 миллионов страниц (до 3000 в секунду), и делают около 800.000 откликов на вакансии. Мы хотим знать о всех действиях пользователя и понимать их поведение. Поэтому внедряем различные инструменты для сбора и анализа данных, и сейчас ищем человека, который будет развивать инфраструктуру BigData.

Задачи:

поддерживать, развивать и мониторить существующие hadoop-кластера;
повышать стабильности и скорости основанных на нем инструментов аналитики;
автоматизировать развертывание кластера (мы используем ansible);
планировать горизонтальный и вертикальный роста кластера;
развивать инфраструктуру BigData, внедрять Flume, Airflow и др.;
экспериментировать с новыми системами сбора и анализа данных;
помогать аналитикам и разработчикам в их ежедневной работе с hadoop.

Требования к работнику:

практические навыки администрирования hadoop-кластера;
глубокие знания Linux;
опыт работы с системами контроля версий (git, mercurial);
любовь к автоматизации рутинных задач на скриптовых языках (shell/awk/sed, python);
плюсом будет опыт разработки на java;
приветствуется знание Spark, Hive, Flume, Airflow, Kafka и инструментов аналитики.

Мы хотим, чтобы каждый сотрудник был доволен своей работой, поэтому мы предлагаем:

hadoop-кластер из 22 узлов содержащий 170 Тб данных, ежедневно добавляется 150 миллионов событий (30 Гб).
удобное светлое рабочее место, со всем необходимым для работы.
«белую» заработную плату, выплачиваемую точно в срок.
гибкий график работы (забыть про утренние пробки — это бесценно).
хороший тренажерный зал в офисе и душ при нем. А также занятия йогой, настольный теннис и кикер.
кофе в кофемашинах, чай, печенье, фрукты на кухне.
корпоративный ДМС (решаем вопросы со здоровьем быстро и удобно).
из другого региона? Поможем с возмещением расходов на переезд.
если вам есть, что рассказать и чему научить, или хочется поучиться, — мы даём возможность участвовать (и как слушатель, и как тренер).в специализированных конференциях и внутренних семинарах, в т.ч. в Школе программистов.