Co oferujemy

• Wynagrodzenie w oparciu o umowę B2B (via Devire).
• Współpraca 100% zdalna.
• Pakiet benefitów (opieka medyczna, członkostwo sportowe itp.)

Wymagania

• 2+ lat doświadczenia w Python oraz doświadczenie w tworzeniu procesów przetwarzania danych.
• Praktyczna znajomość SQL, w szczególności w środowisku Teradata.
• Doświadczenie w pracy z pySpark i środowiskiem Databricks.
• Umiejętność projektowania i implementacji procesów ETL/ELT.
• Doświadczenie w integracji danych z wielu technologii (REST API, kolejki danych: RabbitMQ/Kafka, procesy wsadowe).

Obowiązki

• Udział w rozwoju warstwy danych centralizującej informacje z różnych źródeł.
• Wsparcie w projektowaniu, implementacji i utrzymaniu procesów ETL/ELT dla aplikacji frontendowej (Vue).
• Implementacja i rozwój pipeline’ów danych z wykorzystaniem Python, SQL i pySpark.
• Uczestnictwo w integracji danych pochodzących z różnych kanałów (API, RabbitMQ/Kafka, batch).
• Przetwarzanie, parsowanie, czyszczenie i transformacja danych.
• Bieżąca współpraca z innymi jednostkami - komunikacja, zbieranie informacji, koordynacja tematów end-to-end pod opieką bardziej
• doświadczonych członków zespołu.
• Praca w środowisku Databricks oraz udział w tworzeniu dobrych praktyk przetwarzania danych.