Senior Data Engineer (Data Platform)

Мы ищем опытного Data Engineer с сильным уклоном в Python-разработку. Вы создадите надежные решения, которые помогут команде аналитики работать быстрее, эффективнее и стабильнее.

Чем предстоит заниматься:

• Писать фрэймворки на Python для решения сложных прикладных задач.
• Разрабатывать Python-код для оркестрации ELT-пайплайнов обработки данных.
• Интегрировать и улучшать существующие продукты команды.
• Оптимизировать SQL-запросы и писать их самим.
• Работать с аналитиками и проверять на корректность их SQL-запросы трансформаций данных.
• Работать в команде из 10 человек над проектами: LakeHouse, DataVault, SnowPlow Streaming, ML Platform.
• Реализовывать интеграции с различными источниками (API, DB, apps).
• Развивать LakeHouse.
• Развивать Self Served фреймворк для аналитиков (Миграция на SQLMesh).
• Развивать ETL фреймворк.
• Взаимодействовать с другими подразделениями компании для определения требований к архитектуре и обеспечения их реализации.
• Обеспечивать целостность, надежность и безопасность данных на платформе.
• Разрабатывать и поддерживать документацию, схемы данных и метаданных.

Ожидания от вас:

• Глубокие знания Python и умение применять их в реальных проектах.
• Продвинутый SQL: оптимизация запросов и работа со сложными конструкциями.
• Высшее образование в области информационных технологий, компьютерных наук или эквивалентной области;
• Опыт работы не менее 4 лет в области разработки и управления платформами данных;
• Глубокие знания архитектуры платформ данных, ETL/ELT процессов (батч/стрим) и методов обработки данных;
• Знание современных технологий и инструментов для работы с большими данными (Trino, Airflow, Kafka, Spark, BigQuery и др.);
• Высокий уровень владения SQL и Python (>3.8);
• Знание основных структур данных и алгоритмов;
• Готовность пройти алгоритмический этап собеседования;
• Cамостоятельность и ответственность за результат;
• Проактивность;
• Отличные коммуникативные навыки - важно уметь работать в команде;
• Умение работать в динамичной среде и адаптироваться к изменениям;
• Умение самостоятельно планировать ресурсы на выполнение поставленных задач в рамках спринта.

Будет плюсом:

• Опыт работы с облачными платформами (AWS, GCP, Azure);
• Знание принципов Data Vault и опыт их внедрения;
• Сертификаты в области управления данными, аналитики или облачных технологий;

• Опыт работы с инструментами для мониторинга и обеспечения качества данных.

Мы предлагаем:

• удаленную работу или современный комфортный офис в центре Москвы/Санкт-Петербурга;
• льготы IT-компании для всех сотрудников;
• компенсацию стоимости техники, которую вы приобретаете для работы;
• компенсацию расходов на занятия спортом;
• расширенное медицинское обслуживание;
• возможность проходить профильное обучение и повышать квалификацию за счет компании, посещать профильные конференции и воркшопы;
• доступ к сервису психологической поддержки;
• корпоративную программу лояльности: персональная скидка на Flowwow + предложения от партнеров;

• развитое внутреннее комьюнити, где можно делиться опытом и навыками в разных сферах, участвовать в играх, мероприятиях и даже в режиме home office чувствовать себя частью команды.
  
  Наши ценности

  Забота и любовь

  Наш продукт основан на желании людей радовать друг друга и быть вместе. Пока любовь жива, у Flowwow будут пользователи.

  Развитие и рост

  Flowwow быстро развивается и с радостью поддерживает инициативы сотрудников.

  Культура взаимопомощи

  У нас работают люди, вовлеченные в процесс и небезразличные к тому, что они делают.

  Открытость к изменениям

  Каждый может проявлять инициативу, предлагать и быстро видеть свой вклад в общий успех.

  Благотворительность

  Одна из целей Flowwow — помогать людям. Нас объединяют социальная ответственность и готовность участвовать в специальных благотворительных мероприятиях.