Data Engineer( Группа компаний С7 )

Компания "Группа компаний С7"

S7 TechLab – IT компания, реализующая инновационные IT продукты для подразделений группы компаний S7. Собственная система управления программой лояльности, развлекательный портал на борту для пассажиров, сервис для подбора экскурсий – это лишь некоторые примеры типовых задач, которые реализуются силами команды S7 TechLab и помогают авиакомпании занимать лидирующее место на рынке авиаперевозок России.

Обладая внутренней IT-экспертизой и инновационным подходом, мы развиваем онлайн-сервисы для путешественников. В приложении и на сайте s7.ru можно не просто купить билет, но и полностью организовать своё путешествие: забронировать отель, взять с собой питомца, заказать экскурсию, купить товары в дорогу. В нашей команде работают талантливые и увлеченные специалисты, которые каждый день создают лучший трэвел-опыт в России.

Сейчас мы находимся в поисках Data Engineer в команду Data office S7. В нашей линейке продуктов представлены хранилища, отвечающие за данные по коммерции, флоту, сотрудникам, рейсам и многое другое. Вам предстоит быть участником единой команды, которая занимается их разработкой. Мы храним и обрабатываем данные в Vertica и PostgreSQL, оркестрируем ETL процессы в Airflow, загружаем и выгружаем обратно данные в kafka и s3. Вся инфраструктура размещена в kubernetes.

• Разработка, поддержка и оптимизация ETL/ELT процессов для формирования слоёв модели данных и витрин данных, а так же загрузки данных систем источников из "шины" данных (kafka, s3);
• Настройка инструментов и фреймворков для обработки и анализа данных;
• Взаимодействие с командой аналитиков по постановке задач и командой разработки по технической реализации;
• Миграция с легаси решений на новые целевые;

• Уверенное знание SQL;
• Владение одним из языков программирования (Python, Scala, Java);
• Опыт работы с любой РСУБД;
• Навыки работы Git;
• Умение работать в команде, хорошие коммуникативные навыки;

• Распределенный брокер Kafka;
• DQ фреймворки (GreatExpectations, Soda, Deeque и т. д.);
• Оркестраторы ETL/ELT процессов (Airflow,Dagster);
• MPP системы (Vertica,Greenplum, Trino, Teradata);
• Распределенные объектные хранилища(HDFS, S3);
• Принципы контейнеризации и оркестрации (Docker, Kubernetes);

• Работать из офиса в самом центре Новосибирска или выбрать удаленный график;
• Летать по корпоративным тарифам S7 Airlines. Спойлер: почти бесплатно!

• Заботиться о себе: ДМС после испытательного срока, бесплатные тренировки и безлимитные консультации юристов, психологов и других специалистов;

• Развиваться и расти: обучение по профилю — за наш счет!

Открыть контакты работодателя

Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя