Opis stanowiska

Obowiązkowe: Bardzo dobra znajomość Pythona. Doświadczenie w budowaniu, rozwijaniu i utrzymywaniu produkcyjnych pipeline'ów danych. Praktyczna znajomość PySpark lub innego narzędzia do przetwarzania rozproszonego. Bardzo dobra znajomość SQL. Doświadczenie w przetwarzaniu dużych zbiorów danych, w tym wolumenów przekraczających dostępną pamięć operacyjną. Znajomość narzędzi do orkiestracji przepływów danych, np. Airflow lub Argo Workflows. Praktyczna znajomość Git i Dockera. Znajomość dobrych pra…