Data Engineer

Data Engineer Employment type: Полный рабочий день Grade: Senior Skills: Python, Apache Hadoop, Apache Spark, Apache Airflow, Apache Kafka, FastAPI Description: Ищем Data Engineer / Backend специалиста для разработки и развития высоконагруженных систем антифрод-скоринга, работающих в режиме реального времени. Вы будете работать на стыке Data Engineering, Backend и Machine Learning: развивать микросервисы и data процессы, создавать витрины и ML-фичи, обеспечивать обработку и доставку данных в online и batch контуры. Чем предстоит заниматься Разработка и развитие микросервисов и data процессов для online/streaming и batch обработки Построение пайплайнов обработки, обогащения и репликации данных Создание витрин, агрегатов и ML фичей для антифрод моделей Работа с большими объемами исторических данных и тяжелыми расчетами Обеспечение качества, консистентности и доступности данных Оптимизация производительности и надежности сервисов и пайплайнов Взаимодействие с бизнес заказчиками и Data Scientists: сбор требований, проработка решений, понимание особенностей обучения и применения ML моделей Наши пожелания к кандидатам Коммерческий опыт разработки на Python Опыт создания backend сервисов и data пайплайнов Понимание принципов микросервисной архитектуры Опыт работы с большими объемами данных Понимание batch и streaming обработки Опыт работы с реляционными и in-memory базами данных Понимание принципов работы ML пайплайнов Готовность самостоятельно разбираться в предметной области и работать на стыке технических и бизнес задач Будет плюсом Опыт в Anti-Fraud / Risk / Scoring, low-latency системах, feature pipelines, online inference Практический опыт со Spark, Kafka, Tarantool или Ignite Наш стек Big Data: Spark, Hadoop, S3, Iceberg, Airflow Backend: Python, FastAPI, Flask, Aiohttp СУБД: MS SQL, Oracle, PostgreSQL In-memory: Redis, Apache Ignite, Tarantool DB, Tarantool Column Store Streaming: Kafka Инфраструктура: Linux Что мы предлагаем Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования Пятидневная рабочая неделя: с 9.00 до 18.00 и в пятницу у нас сокращенный рабочий день, удаленный формат работы Среда для твоего неизбежного развития: тебя ждут сложные и интересные задачи с использованием большого массива данных, у нас регулярно проходят тренинги, вебинары, у тебя будет доступ к бесплатным - корпоративным библиотекам Альпины и бизнес - изданий, скидки на курсы иностранных языков Карьерный рост: ты будешь понимать, что нужно сделать для перехода на другой уровень Чувство локтя: у нас дружелюбная атмосфера и команда лучших профессионалов, которые готовы делиться с тобой экспертизой Забота о твоем здоровье: программа ДМС, куда входит стоматология и обслуживание в лучших клиниках города, скидки на абонементы в фитнес-клубы, неформальные спортивные сообщества Возможности для разнообразного досуга: скидки на услуги туристических агентств, продукты питания, в рестораны и бары, в магазины Программа развития AI-грамотности: треки по работе с нейросетями от базового до продвинутого уровня