Мы переезжаем на новую аналитическую инфраструктуру и новые подходы к обработке данным. Для ускорения этого процесса, мы находимся в поиске инициативного и самостоятельного инженера по данным, который внесет свой вклад в модернизацию фундамента аналитики в компании.
Список основных технологий:
В качестве основного хранилища данных используем ClickHouse;
Используем Metabase в качестве основного средства визуализации. Также есть Redash для внутренних нужд;
Данные доставляем в хранилище посредством Airflow и Kafka.
Чем тебе предстоит заниматься:
Принимать архитектурные решения при разработке систем хранения, обработки, валидации и представления данных;
Создавать и поддерживать витрины данных;
Оптимизировать существующие потоки данных;
Примеры проектов, запланированных на 2022 год:
Настроить валидацию качества данных аналитики в реальном времени;
Разработать динамически формируемые запросы для финансовых отчетов и продуктовых воронок;
Перевести сбор поведенческой аналитики на Kafka;
Разработать систему обогащения и денормализации данных.
Мы ищем дата-инженера, который:
Имеет опыт работы на аналогичной позиции от 2 лет;
Имеет опыт коммерческой разработки на Python и/или Java / Scala, а также взаимодействия со средой Docker / Kubernetes;
Умеет проектировать и разрабатывать ETL-процессы (пакетные и потоковые).
Умеет составлять и оптимизировать SQL запросы, разрабатывать витрины данных;
Уверенно владеет работой со Spark, Kafka, Airflow, S3;
Знает английский язык на уровне понимания технической документации и статей;
Стремится непрерывно развиваться, искать и пробовать новые инструменты, подходы и методы.
Будет преимуществом:
Опыт работы с ClickHouse, Apache Flink, Apache Ignite
Пара причин стать частью команды:
Свобода в выборе методов и инструментов — мы за внедрение новых подходов
Находимся в Санкт-Петербурге, в 10 минутах от метро, в уютном, светлом и просторном офисе в бизнес-центре A класса
В офисе есть огромный open-space, 5 переговорных комнат, 2 коворкинга, лекторий, большая кухня, много мягких пуфиков, зеленых растений, комната отдыха, игровая с кикером и настольным теннисом
Полностью «белая» заработная плата
Гибкое начало дня и гибридный формат работы
Бюджет на посещение профессиональных конференций
Топовое железо для рабочего места
Квартальные премии
ДМС со стоматологией после испытательного срока
Оптимистичная атмосфера, совместные посиделки, развлекухи, пицца по пятницам, холодильник с колой и ништяки к кофе и чаю
Если ты хочешь в команду kupibilet, но живешь в другом городе, мы поможем тебе с переездом.