Senior Data Engineer (финсервисы, Kafka + Clickhouse)

Wildberries - это 30 млн пользователей ежедневно и технологические задачи, у которых нет аналогов. Наша компания стабильно развивается и работает в усиленном режиме: использует современный стек и новейшие технологии, разрабатывает множество новых hi-tech продуктов. - 8 стран присутствия и более 30 тыс. пунктов выдачи заказов- Ежедневно совершаются 10 млн заказов- 8 из 10 заказов доставляются на следующий день- Свыше 170 000 человек в нашей команде Проект: развитие фин сервисов - Баланса Продавцов и Баланса Покупателей. Баланс покупателей - внутренний счет клиента в ВБ + оплаты покупателей на ВБ + электронный кошелек для оплат.Баланс продавцов - внутренний счет продавца на ВБ + тарификатор. Система, которая рассчитывает доходы и расходы продавца в онлайн режиме и позволяет получать выручку от продаж в любое время для продавца. Задачи: Анализ исходных систем, и методов интеграции с ними. Участие в разработке проектных решений на интеграцию; Разработка и оптимизация процессов интеграции данных из различных источников; Идентификация и устранение проблем качества данных, включая проблемы с интеграцией, дублированием, неполнотой и неточностью данных; Обеспечение контроля доступности данных. Постоянное улучшение процессов работы с данными для повышения эффективности и скорости обработки данных; Аd-hoc задачи по подготовке данных/отчетов, их автоматизация.
Требования:
Релевантный опыт работы от 3 лет; Уверенное владение Python, опыт работы с FastAPI (или другим web фреймворком); Опыт работы с Airflow, Kafka; Навыки работы с SQL (джоины, оконные функции) - Clickhouse, Рostgres; Знание базовых алгоритмов и структур хранения данных; Понимание концепций ООП. Будет плюсом опыт работы на Golang. Мы предлагаем: Официальное оформление в соответствии с ТК РФ (также есть возможность оформления по ИП, ГПХ и СЗ); Официальная заработная плата; В приоритете гибридный формат работы в Москве, но возможна полная удаленка; Место работы: просторный open-space с массажными креслами, пуфами и многим другим в шаговой доступности от ст. м. Парк Культуры; Бесплатное питание на собственной оборудованной кухне, а также вендинговые аппараты; Корпоративные скидки у партнеров, внешние программы по обучению и внутренние митапы; Максимум возможностей для профессиональной самореализации; Интересные и сложные проекты, уникальный опыт.