Wymagania

Technologie wymagane

Azure/AWS/GCP

Databrics

Microsoft Azure

AWS

Google Cloud Platform

Databrics Spark

PySpark

SQL

Python

Oracle

PostgreSQL

Microsoft SQL Server

Technologie mile widziane

Snowflake

Nasze wymagania

• Minimum 5 lat doświadczenia na podobnym stanowisku
• Bardzo dobra znajomość języków SQL i Python oraz narzędzia Spark/PySpark
• Doświadczenie w budowaniu skalowalnych, działających w czasie rzeczywistym i wysokowydajnych rozwiązań typu Data Lake
• Umiejętność rozwijania procesu ETL w różnych narzędziach (SSIS, ADF, IPC)
• Znajomość rozwiązań chmurowych (Azure, AWS, GCP)
• Doświadczenie w projektach związanych z migracją danych z on-premise do chmury (bazy danych: Oracle, PostgreSQL, MS SQL)
• Swobodna komunikacja w języku angielskim

Twój zakres obowiązków

• Budowanie i projektowanie rozwiązań Data Lake i DWH
• Automatyzowanie oraz optymalizowanie procesów przetwarzania danych
• Łączenie danych z różnych systemów źródłowych (bazy danych, pliki, API) w jedno spójne środowisko analityczne
• Rozwijanie procesów ekstrakcji, transformacji oraz ładowania danych (ETL) z różnych źródeł
• Ścisła współpraca z interesariuszami biznesowymi
• Rozwijanie i optymalizacja środowiska chmurowego pod kątem wydajności i niezawodności