Data-engineer

Требования:
Отличные знания SQL: оптимизация запросов, понимание планов запроса, внутренней работы SQL и баз данных (оптимизация запросов, join, типы индексов и т.д.). Уверенное знание Python: написание API, алерт-ботов, небольших скриптов и сервисов. Опыт работы с СlickHouse. Опыт и хорошее понимание принципов работы Airflow. Опыт проектирование архитектуры DWH. Опыт написания сервисов с нуля. Понимание концепции (звезда, Data Mesh, Data Vault) хранилищ данных (DWH, Data Lake): слои, витрины, агрегаты, Data Quality. Знание инфраструктурных инструментов: Docker, Bash, Git, CI/CD, Kubernetes, Grafana. Чем предстоит заниматься: Развивать инструменты контроля и поддержания качества данных (Data Quality / Data Governance). Разрабатывать архитектуру данных (YTsaurus/ClickHouse). Разрабатывать ETL-процессы. Оптимизировать текущие процессы (YTsaurus/ClickHouse). Оптимизировать запросы (SQL/Python). Разрабатывать и оптимизировать Data Warehouse (Python/Airflow). Создавать и поддерживать витрины данных (функции/VIEW и т.д.) Предоставлять экспертную поддержку внутренним потребителям (Data Analysts, Data Scientists) по вопросам, связанным с использованием данных.
Условия:
Работа в крупной и стабильной IT компании. Удаленный формат работы - возможность работать из любой точки мира. Оформление по ИП или ГПХ; Профессиональный и дружный коллектив. Высокий уровень стабильного дохода, условия обсуждаются с каждым кандидатом индивидуально по результатам интервью. Выплата в удобной валюте