Разработчик Big Data

г. Москва, офис
вакансия не подразумевает удаленной работы и необходим выход в офис в данном городе
Опыт: до 1 года
Полная занятость
г. Москва, офис
вакансия не подразумевает удаленной работы и необходим выход в офис в данном городе
Опыт: до 1 года
Полная занятость
Если Вы не нашли подходящую вакансию, пожалуйста, пришлите Ваше резюме, мы обязательно подберем для Вас работу мечты.





    Немного о проекте:

    Команда занимается подготовкой и сборкой витрин для розничного кредитного конвейера. Розничный кредитный конвейер — это комплексное решение для автоматизации бизнес-процессов потребительского, ипотечного и автокредитования физических лиц. В качестве источника у нас выступает Хранилище данных в составе кластера Hadoop от Cloudera. Приемником — Хранилище быстрых витрин, реализованное на базе СУБД Oracle. Интеграция между источником и приемником реализована посредством Spark через JDBC.

    Чем предстоит заниматься?

    — Развитие (расширение атрибутивного состава, количества витрин, пересборка алгоритмов), разработка на Spark и Airflow (DAG AirFlow, в нем таски, которые вызывают pyspark код);

     — 3-я линия поддержки – разбор аварий и инцидентов на проме, которые не в состоянии решить 1 и 2 линия, саппорт внедрений;

     — Инженерные задачи – переезд на другие кластера, сайзинг, оптимизация кода.

    Мы ожидаем от тебя:

    — Опыт промышленной разработки на Рython от 2-х лет;

     — Опыт работы с СУБД – Cloudera Hadoop, Oracle;

     — Уверенное знание Spark и Airflow;

     — Понимание принципов организации Data Lake/DWH.

    Стек:

    Cloudera Hadoop, Oracle, Spark, Airflow, Рython

    Что мы предлагаем?

    — Конкурентную заработную плату;

    — Интересные задачи и возможность участия во внутренних проектах отдела и компании в целом;

    — Условия работы в соответствии с ТК РФ + социальный пакет (ДМС, оплата обучения и скидки у партнеров);

    — Формат работы — удаленка 70%, офис 30% в Москве;

    — Тебя будет окружать классная команда, с которой можно реализовывать крутые и амбициозные идеи. Скучно точно не будет;

    — Мы проводим регулярные внутренние семинары, посвященные новым технологиям и самым актуальным темам в области разработки, аналитики и тестирования;

    — Гибкий рабочий график с началом дня с 8:00 до 12:00;

    — Мы за индивидуальность, поэтому дресс-кода у нас нет.

     24 просмотров