Обязанности
- Аудит и развитие: Принять текущую инфраструктуру данных, провести ревизию существующих пайплайнов и архитектуры хранилища.
- Интеграция: Проектирование и разработка надежных ETL/ELT-процессов (Airflow, Python) для сбора данных из распределенных веб-сервисов и продуктовых баз.
- Хранилище: Проектирование архитектуры слоев в Greenplum (Data Warehouse). Оптимизация тяжелых SQL-запросов.
- Бизнес-ценность: Сборка витрин данных и визуализация бизнес-метрик в дашбордах (Apache Superset) в плотной связке с внутренними заказчиками.
- Надежность: Настройка алертинга и мониторинга пайплайнов, чтобы данные обновлялись бесперебойно.
- Наш стек: Python, SQL, Apache Airflow, Greenplum, Apache Superset, Docker (Linux).
Требования
- Уверенный Data Engineer (от 3 лет), который не боится работать full-stack: от извлечения данных по API до настройки дашборда.
- Отличное знание Python и SQL.
- Опыт работы с Greenplum (или ClickHouse/PostgreSQL на больших объемах) и Airflow.
- Продуктовое мышление: вы понимаете, что ценность данных — в ответах на вопросы бизнеса, а не в самом факте их хранения.
- Умение работать автономно и брать на себя ответственность за технические решения.
Условия
- Место работы: г. Санкт - Петербург
- Участие в проекте с высокой степенью ответственности и возможностью влиять на архитектуру
- Современный технологический стек и поддержку профессионального роста
- ДМС, страхование жизни и выезда за рубеж, корпоративные скидки, кафетерий льгот (на выбор)
- Годовая премия по результатам работы
- Благодаря инновационному подходу к работе и использованию самых продвинутых технологий, компания получила статус аккредитованной ИТ-компании
- Здоровая рабочая атмосфера, комфортные условия труда (чай, кофе, фрукты, пинг-понг, кикер, занятия йогой в офисе, участие в спортивных мероприятиях)
- Пятидневная рабочая неделя, гибкое начало рабочего дня с 8.00 до 10.00
- Работа в офисе в Санкт-Петербурге