ETL разработчик

Центр изучения и сетевого мониторинга молодёжной среды – аккредитованная IT-компания, учреждённая по поручению Президента России в октябре 2018 года. Деятельность организации ориентирована на создание IT-решений, направленных на формирования комплексной системы по защите детей и подростков от воздействия негативной информации в сети. В команду обработки и хранения данных ищем ETL разработчикаСтек: ClickHouse, AirFlow, DBT, Kafka, Python, SQL Задачи:- разработка batch и streaming data pipelines, используя Apache Kafka, Airflow, а также создание потоков данных, используя собственное решение для streaming обработки данных (selfservice etl);- обогащение хранилищ данных и витрин в ClickHouse;- проработка требований и согласование способов интеграции внешних источников совместно с системным аналитиком, data архитектором;- предоставление поддержки data-потребителям по вопросам, связанным с использованием данных.
Требования:
- опыт построения различных по сложности Airlfow Dag для интеграции данных из внешних источников и обогащению dwh;- опыт работы с ClickHouse;- понимание концепций построения хранилищ данных;- отличное знание SQL. Будет плюсом:- желание развиваться и не останавливаться на достигнутом, познавать новое и активно развиваться;- ваша любовь к данным, поддержка и развитие dwh, сбор и структурирование данных для вас не просто процесс, а увлечение.
Условия:
- конкурентный уровень з/п, размер обсуждается по итогам собеседования и квалификации;- официальное оформление по ТК РФ;- удаленная работа;- гибкое начало рабочего дня, график 5/2, выходные: суббота/воскресенье;- непрерывное обучение и развитие профессиональных навыков.