DWH Разработчик
Вакансия № 20989909 от компании Лаборатория Касперского на Электронной Службе Занятости Населения Москвы.
✷ Смотрите другие предложения работы от компании Лаборатория Касперского.
☑ Основной блок:
Опыт работы: 3–6 лет.
Тип занятости: полная занятость.
График работы: полный день.
Зарплата: по результату собеседования.
Место работы (точный адрес): Россия, Москва, Ленинградское шоссе, 39Ас1.
☑ Актуальность объявления:
Это объявление № 20989909 добавлено в базу данных: Суббота, 15 февраля 2025 года.
Дата его обновления на этом интернет-ресурсе: Понедельник, 17 марта 2025 года.
☑ Статистика предложения работы № 20989909:
Прочитано соискателями - 75 раз(а);
Отправлено откликов - 0 раз(а);
☑ Репутация компании "Лаборатория Касперского":
Читайте свежие отзывы сотрудников об этом работодателе здесь!
Оставить своё мнение об этой компании можно тут без регистрации и бесплатно.
☑ Подробности о вакантном месте:
Мы - команда инженеров, которая занимается развитием и поддержкой внутреннего хранилища данных в Лаборатории Касперского.
Объем хранилища данных исчисляется терабайтами данных и продолжает расти. ETL процессы реализованы на связке SQL Server Integration Services и T-SQL.Для нестандартных задач используется С#. Также в команде внедряется DataLake на базе Kafka, Hadoop, Spark, Airflow.
В команде хорошо развиты процессы и инженерные практики: написание автотестов, ревью, CI/CD, автоматизированные мониторинги. Для автотестов у нас есть собственный фреймворк на базе библиотеки tSQLt.На текущий момент в проекте более тысячи автоматизированных тестов. Для мониторинга процессов загрузки используются такие инструменты как Prometheus, Grafana, SCOM.
(Возможна удаленка)
Что предстоит делать в нашей команде:
- Разработка ETL процессов на связке C# + SSIS + T-SQL по загрузке данных из разных гетерогенных источников (базы, API, SFTP, брокеры сообщений)
- Подключение новых источников из корпоративной шины (Kafka, RabbitMQ)
- Модернизация существующего батчевого процесса отгрузки данных в систему маркетинговых коммуникаций (переход на стриминг).
- Решение задач оптимизации ETL-процессов и структур хранения данных при работе с большими объемами данных
- Разработка автотестов на процессы загрузки данных и развитие инфраструктуры тестирования.
- Разработка мониторингов качества данных
- Поддержка существующих процессов загрузки данных
От кандидата ожидаем:
- Отличное знание SQL
- Понимание принципов работы БД и построения хранилищ данных
- Опыт работы с MS SQL Server (оптимизация запросов, партиционирование, колоночные индексы)
- Опыт работы с SQL Server Integration Services
- Опыт разработки на C# (базовый уровень)
- Непрерывное профессиональное развитие, к примеру: изучение новых языков программирования, онлайн курсы, контрибьюты в открытые проекты, чтение книг, блогов, подкасты и т.д.
Будет плюсом:
- Опыт работы с брокерами сообщений (RabbitMQ, Kafka)
- Опыт работы с Docker
- Опыт работы с моделью данных DataVault
☑ О компании:
Обратите внимание на веб-сайт компании - http://www.kaspersky.ru - с подробной информацией об организации, в том числе контактными телефонами.Логотип (эмблема, торговая марка, бренд) компании:
Сфера деятельности компании: Информационные технологии, системная интеграция, интернет; .
☑ Отклинуться сообщением, резюме, запросить телефон, отправить жалобу (претензию):