Data Engineer

Aston — аккредитованная аутсорсинговая IT-компания, работающая с 2007 года. Наш штат насчитывает 2500+ специалистов. Мы разрабатываем программное обеспечение и IT-решения в сферах Finance, Healthcare, eCommerce, IoT, Media, Big Data, ML и многом другом.

Предлагаем присоединиться в роли Data Engineer и работать над проектом заказчика.

Заказчик - крупнейший коммерческий банк страны, лидер по объему активов и цифровому развитию. Активно продвигает мобильные сервисы, ценит скорость, гибкость и неформальный подход внутри команд. Многократно отмечен престижными наградами, в том числе «Bank of the Year in Russia 2019» (The Banker) и «Best Mortgage Bank in CEE» (Global Finance).

• опыт работы в роли Data Engineer от 4-х лет;
• отличные знания SQL, опыт оптимизации сложных запросов;
• знание основ математической статистики, анализа данных и основ машинного обучения;
• глубокая экспертиза в разработке на PySpark и написании сценариев Airflow;
• опыт работы с высоконагруженными распределенными системами обработки и хранения данных (Hadoop);
• опыт работы с PostgreSQL, MS-SQL, Oracle, ClickHouse;
• опыт оптимизации Spark-приложений и управления ресурсами Spark;
• опыт работы со стеком Streaming/Storage/Messaging: Spark Streaming, Iceberg, Kafka, S3;
• опыт работы с контейнеризацией и оркестрацией в среде Kubernetes (K8s);
• опыт проведения нагрузочного тестирования систем обработки данных;
• умение работать в условиях распределенных систем и обеспечивать консистентность данных при автоматическом определении типов схем.