Middle / Senior Data Engineer

Middle / Senior Data Engineer Employment type: Полный рабочий день Grade: Senior Skills: SQL, PostgreSQL, ClickHouse, Greenplum, DWH, Apache Spark, Apache Airflow, ETL Description: Ищем Data Engineer в крупную технологическую компанию, которая разрабатывает высоконагруженные платформенные продукты для международных рынков в entertainment-индустрии. Внутри — развитое data-направление и задачи, связанные с построением и развитием современной платформы данных. Ищем инженера, который умеет самостоятельно проектировать надежные data pipelines, уверенно работает с DWH и понимает, как устроены production-процессы работы с большими объемами данных. Чем предстоит заниматься — проектировать, разрабатывать и развивать data pipelines; — работать с DWH: моделями данных, слоями, витринами и ETL/ELT-процессами; — писать и оптимизировать сложные SQL-запросы; — разрабатывать на Python инструменты и сервисы для работы с данными; — поддерживать и развивать production-пайплайны; — работать с большими объемами данных и распределенной обработкой; — следить за качеством и надежностью данных; — участвовать в выборе технических решений и развитии data-платформы; — взаимодействовать с аналитиками, разработчиками и другими продуктовыми командами. Для Senior-уровня также важен опыт самостоятельного проектирования архитектурных решений и способность брать ответственность за технический подход к задаче. Что для нас важно — очень хорошее знание SQL и опыт работы со сложными запросами и большими объемами данных; — уверенный Python: не только небольшие скрипты, но и production-код, библиотеки или внутренние инструменты; — хорошее понимание принципов построения DWH; — опыт проектирования и разработки ETL/ELT-процессов; — понимание моделирования данных, построения витрин и контроля качества данных; — умение самостоятельно разбираться в задаче и предлагать техническое решение. Желательно — практический опыт с Airflow: разработка и поддержка DAG, scheduling, retries, backfill, monitoring; — опыт с dbt или похожими инструментами трансформации данных; — опыт со Spark и понимание распределенной обработки данных; — работа с аналитическими СУБД: ClickHouse, Greenplum, Vertica или другими MPP/OLAP-системами. Будет плюсом — Kafka; — Iceberg; — Trino; — Docker / Kubernetes; — CI/CD; — понимание подходов Data Mesh; — участие в open-source или собственные технические проекты. Условия — full-time; — удаленный формат работы; — гибкое начало рабочего дня; — корпоративная техника; — испытательный срок 3 месяца; — расширенный пакет бенефитов после испытательного срока: медицинская страховка, бюджет на спорт / языки / дополнительное медицинское покрытие, дополнительные оплачиваемые дни отдыха; — внутренние технические встречи, тренинги и возможность участия в профессиональных конференциях и обучении. Процесс Знакомство с рекрутером → короткий технический скрининг → технические секции по SQL, DWH и Python → для кандидатов Senior-уровня дополнительная секция по архитектуре и проектированию → встреча с командой.