Дата-инженер

Город вакансии Usetech
Горящая вакансия
Любой город, удаленно
но можно работать и в офисе: Москва, Ростов-на-Дону, Томск, Барнаул, Рязань, Минск
Опыт: от 3 до 6 лет
Полная занятость
Город вакансии Usetech
Горящая вакансия
Любой город, удаленно
но можно работать и в офисе: Москва, Ростов-на-Дону, Томск, Барнаул, Рязань, Минск
Опыт: от 3 до 6 лет
Полная занятость
Если Вы не нашли подходящую вакансию, пожалуйста, пришлите Ваше резюме, мы обязательно подберем для Вас работу мечты.





    ГК Юзтех входит в топ-15 лидеров разработки программного обеспечения на российском рынке (CNews Analytics), в топ-7 лучших IT-работодателей России 2022 (HeadHunter и Habr.Карьера) и 4 года подряд получает 1 место субрейтинга HeadHunter в номинации "Самые вовлеченные сотрудники".

    Задачи

    • Анализ существующих решений и витрин данных
    • Миграция витрин данных со стека Hadoop (Hive, Oozie, Spark 2.4, Impala) на стек Apache Iceberg + Spark 3.5 + Apache Airflow
    • Реализация недостающих реплик для витрин данных с источников с использованием готовых кодогенераторов
    • Переработка существующих решений на целевом стеке, в отдельных случаях — разработка решений с нуля по шаблонам
    • Построение и развитие витрин данных, участие в их тестировании и валидации
    • Наполнение и актуализация технической документации по разработанным решениям
    • Взаимодействие с командами разработки и аналитики в рамках проработки и внедрения решений

    Мы ожидаем

    • Уверенные знания SQL и Python
    • Опыт работы с Apache Spark
    • Практический опыт работы с хранилищами данных на базе Hadoop / S3 / S3-compatible storage
    • Обязательное знание и опыт работы с Apache Iceberg (таблицы, версии, schema evolution, partitioning)
    • Опыт использования Apache Airflow для оркестрации и управления пайплайнами
    • Понимание форматов хранения данных, в том числе Parquet
    • Опыт работы с инструментами командной разработки: Git, CI/CD, трекерами задач и документацией (Jira, Confluence или аналоги)
    • Навыки работы с форматами данных JSON, XML
    • Опыт системного анализа и тестирования data-решений
    • Базовое понимание работы реляционных СУБД
    • Базовые знания Kafka и принципов потоковой передачи данных

    Loading

    Мы предлагаем

    • Работу в компании, которая создает популярные приложения для многомиллионной аудитории; высоконагруженные портальные решения, личные кабинеты, а также сложные аналитические системы для сотен-тысяч пользователей;
    • Трудоустройство – официальное по ТК РФ и альтернативные форматы;
    • Рабочий график 5/2, гибкое начало дня;
    • Полис медицинского страхования (ДМС + стоматология для сотрудников, скидки на страхование для членов семьи), а также штатный психолог;
    • Подарки, скидки и сертификаты для детей сотрудников, детские дни и дни проф. ориентации, обучение за счет компании;
    • Регулярные внутренние семинары, посвященные новым технологиям и самым актуальным темам в области разработки, аналитики и тестирования;
    • Оплата обучения и сертификаций;
    • Usetech English Club – обучение английскому с корпоративными скидками, разговорный клуб;
    • Инкубатор продуктовых идей – реализация перспективной идеи продукта или услуги с поддержкой компании;
    • Программа лояльности, основанная на геймификации – возможность заработать внутрикорпоративную валюту за различные достижения и потратить её в онлайн-магазине компании;
    • Предоставляем всю необходимую для работы технику;
    • Открытая корп культура и яркая корпоративная жизнь;
    • Ежегодная аттестация – признание достижений, персональный план развития на год, подведение результатов прошедшего года, построения вектора развития, если в этом есть необходимость.
    Если Вы не нашли подходящую вакансию, пожалуйста, пришлите Ваше резюме, мы обязательно подберем для Вас работу мечты.





      Мы обрабатываем файлы cookie для корректной работы сайта и персонализации сервисов, в т.ч. с использованием метрических программ и систем аналитик. Продолжая пользоваться сайтом, Вы соглашаетесь с использованием файлов cookie. Если вы не хотите, чтобы ваши данные обрабатывались, пожалуйста, ограничьте использование файлов cookie в настройках браузера. Более подробная информация на странице Политика конфиденциальности.
      Принять
      Мы обрабатываем файлы cookie для корректной работы сайта и персонализации сервисов, в т.ч. с использованием метрических программ и систем аналитик. Продолжая пользоваться сайтом, Вы соглашаетесь с использованием файлов cookie. Если вы не хотите, чтобы ваши данные обрабатывались, пожалуйста, ограничьте использование файлов cookie в настройках браузера. Более подробная информация на странице Политика конфиденциальности.
      Принять