Middle Data Engineer

Наш клієнт — провідна група з надання інвестиційних послуг, яка нараховує понад 4750 співробітників у 25 юрисдикціях по всьому світу. Solution поєднує в собі рідкісне поєднання глобального технічного досвіду та глибокого розуміння потреб своїх клієнтів. Solution допомагає своїм клієнтам та галузі дотримуватися нормативних вимог. Вони виступають в ролі охоронців та сприяють інвестиціям клієнтів.

Поточна пропускна здатність мосту для інженерії даних BAU. Підтримуйте працездатність трубопроводів, підвищуйте надійність і звільняйте старших інженерів, щоб вони могли зосередитися на дорожній карті та стратегічній роботі.

 Початковий термін дії договору від 3 до 6 місяців з можливістю продовження.

Невелика, високоефективна група під керівництвом керівника групи з трансформації даних та керівника з інженерії даних. Інструментарій включає Snowflake, DBT, Python та оркестрування на Kubernetes. Співпраця з DevOps та Data Science. Культура цінує відповідальність, чіткість та спокійне реагування на інциденти.

• Процес співбесіди, що поважає людей та їхній час
• Професійна та відкрита ІТ-спільнота
• Внутрішні зустрічі та ресурси для обміну знаннями
• Час для відновлення та відпочинку
• Яскраві онлайн- та офлайн-події
• Можливість стати частиною нашої внутрішньої спільноти волонтерів

• Створюйте, контролюйте та підтримуйте канали передачі даних з різних джерел до Snowflake.
• Створення та підтримка моделей, тестів, документації та середовищ DBT
• Пишіть чистий Python для ELT та утиліт, включаючи пакетування та прості кроки CI CD за допомогою Jenkins або подібних інструментів.
• Розслідувати та вирішувати інциденти BAU відповідно до узгоджених пріоритетів та передавати нотатки
• Покращення спостережуваності, тестування якості даних та виконання інструкцій
• Надавайте стислі PR та огляди, дотримуйтесь стандартів кодування та стратегії розгалуження.
• Координація з DevOps щодо використання ресурсів, секретів та розгортання на Kubernetes
• Підтримуйте передачу знань та оновлюйте документацію

Необхідно мати

1. Більше 4 років досвіду в області інженерії даних з досвідом роботи в Python
2. Потужне моделювання DBT з тестами, експозиціями та управлінням середовищем
3. Міцні навички роботи з Snowflake, включаючи основи продуктивності, ролі та склади
4. Зручні журнали читання, відстеження збоїв та виправлення проблем у конвеєрі
5. Чітка англійська комунікація та прагматичне вирішення проблем

Додатково

1. PySpark або Snowpark
2. Dagster або інший оркестратор
3. Jenkins або подібна CI CD
4. Досвід роботи з Azure або AWS storage та інтеграціями