Senior Data Engineer

Czym będziesz się zajmować?

Zakres obowiązków:

• Projektowanie, rozwój i utrzymanie skalowalnych pipeline’ów do ingestowania, transformacji, wzbogacania i przetwarzania danych ustrukturyzowanych oraz nieustrukturyzowanych.
• Projektowanie i optymalizacja modeli danych w relacyjnych, grafowych i NoSQL bazach; praca z knowledge graphs.
• Modelowanie encji i relacji oraz wydajne ładowanie i odpytywanie danych.
• Tworzenie reużywalnych komponentów przetwarzania danych i integracji ze źródłami oraz API.
• Wdrażanie jakości danych, walidacji, data lineage i provenance.
• Zapewnianie niezawodności i skalowalności pipeline’ów: przetwarzanie przyrostowe, obsługa błędów, ponawianie operacji i odzyskiwanie danych.
• Współpraca z architektami, inżynierami i biznesem przy przekładaniu wymagań na rozwiązania techniczne.
• Automatyzacja testów, CI/CD, monitorowanie i doskonalenie rozwiązań Data Engineering.

• Rozwój zaawansowanej Enterprise Knowledge Platform w międzynarodowym środowisku bankowym.
• Projekt wykorzystuje technologie grafowe, nowoczesne architektury danych i rozwiązania do zarządzania wiedzą.
• Rola hands-on, skoncentrowana na wyzwaniach inżynierskich, bez zarządzania zespołem.

• Kilkuletnie doświadczenie komercyjne jako Data Engineer, Senior Data Engineer lub na podobnym stanowisku.
• Bardzo dobra znajomość Pythona i SQL.
• Praktyczne doświadczenie z grafowymi bazami danych lub knowledge graphs, np. Neo4j, Amazon Neptune, JanusGraph lub podobnymi.
• Doświadczenie w projektowaniu i rozwijaniu produkcyjnych pipeline’ów ETL/ELT.
• Dobra znajomość modelowania danych w relacyjnych i NoSQL bazach.
• Doświadczenie z danymi ustrukturyzowanymi i nieustrukturyzowanymi.
• Znajomość jakości danych, data lineage, ewolucji schematów i niezawodności przetwarzania.
• Doświadczenie ze środowiskami chmurowymi, orkiestracją danych i CI/CD.
• Samodzielne rozwiązywanie złożonych problemów technicznych, dobre umiejętności komunikacyjne i współpraca.

• Doświadczenie z ontologiami, RDF, SPARQL lub technologiami semantycznymi.
• Znajomość języków zapytań grafowych, np. Cypher lub Gremlin.
• Doświadczenie w budowaniu platform zarządzania wiedzą lub metadanymi.
• Doświadczenie w sektorze bankowym, finansowym lub innych środowiskach regulowanych.

• Python
• SQL
• Databases
• NoSQL
• ETL
• Data Engineering

• Cloud
• CI/CD
• Komunikacja
• Praca zespołowa

• Polski
• Angielski

• 31.9k–35.3k PLN brutto/m (Umowa o pracę)
• Umowa o pracę - Elastyczne godziny pracy (100%)
• Praca zdalna: Hybrydowo

Jesteśmy liderem rekrutacji specjalistów i menedżerów oraz doradztwa HR. Marka obecna jest w 35 krajach, w Polsce działa od 1996 roku. Przez ten czas zbudowaliśmy wiele karier zarówno kandydatów, jak i naszych konsultantów. Elastycznie i kompleksowo podchodzimy do potrzeb pracodawców. Specjalizujemy się nie tylko w rekrutacji, ale również doradztwie HR, budowaniu wizerunku pracodawcy i prowadzeniu badań rynku pracy. Stawiamy na dynamiczny rozwój – działamy w 5 miastach w Polsce oraz w Czechach i na Słowacji. Na Węgrzech działamy pod marką Enloyd.